人機交互技術(shù)和應(yīng)用的融合

1、HCI,人機交互技術(shù)與應(yīng)用的融合,米佳,技術(shù)與應(yīng)用的融合：科技改變生活,從iPhone看人機交互技術(shù)Microsoft Surface 的交互創(chuàng)意Microsoft TechFest 2010人機交互應(yīng)用的展望：《阿凡達》&《鋼鐵俠2》中的人機交互技術(shù),一、從 iPhone 看人機交互技術(shù) ——“信息就在指尖”,HCI人機交互應(yīng)

2、用,1、多觸點式觸摸屏技術(shù)（Multi-Touch）,檢測出屏幕上同時被觸摸到的多個點的位置優(yōu)勢：支持更復(fù)雜的姿勢識別(Gesture Recognition)比較：將圖片放大縮小,,HCI人機交互應(yīng)用,一、從 iPhone 看人機交互技術(shù) ——“信息就在指尖”,2、基于傳感器的隱式輸入技術(shù)方位傳感器：能夠檢測出用戶是縱向

3、 還是橫向拿著手機,接近性傳感器: 可以檢測出用戶何時把iPhone拿到了耳朵附近，這樣它就可以關(guān)閉屏幕，達到省電和防止屏幕被誤觸碰的目的。環(huán)境光線傳感器: 可以感知到周圍光線的強度，從而可以自動對顯示屏的亮度進行調(diào)整,,HCI人機交互應(yīng)用,一、從 iPhone 看人機交互技術(shù) ——“信息就在指尖”,3、豐富和人性化的視

4、覺反饋,,HCI人機交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,07年上市，第一款平面電腦，結(jié)合硬件與軟件的新技術(shù)，用家可以直接用手或聲音對屏幕作出指令，觸摸和其他外在物理物來和電腦進行交互，毋須再依賴會令手部勞損的鼠標與鍵盤。特點：電腦能辨識放在Surface上的不同物體，可以啟動不同類型的響應(yīng)，如傳送數(shù)字內(nèi)容。交互方式：多點輸入觸摸屏，iBar和DeLighTable,,HCI人機交互應(yīng)

5、用,二、Microsoft Surface ——新一代交互式電腦,iBar: 交互式的吧臺，臺子里面的視頻投影儀可以在乳白色的臺面上投射出各種圖案，而里面的智能跟蹤系統(tǒng)能夠察覺出碰到臺面的物體，這個輸入信號就可以讓投影儀和接觸物體進行動態(tài)交互，物體被照亮，臺面上不同點之間出現(xiàn)的光線路徑等等。DeLighTable:也是運用光來讓物體（或者人）之間產(chǎn)生有意思的交互。表面也是一個透明塑料膜，中間為一層不透明的液體，下面為發(fā)光層，所以當

6、有外力擠開中間的液體的時候，光就滲透出來了。,,HCI人機交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,Microsoft Surface將改變?nèi)藗冑徫?，就餐，娛樂和生活?和同伴分享你的照片，用你手指拖拽即可,,HCI人機交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,你在餐館就餐時，當你將你的飲料放在Microsoft Surface上時，它的所有信息就會在上面呈現(xiàn)出來,,HCI人機

7、交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,購買東西時的對比，視覺化,,HCI人機交互應(yīng)用,三、Microsoft TechFest 2010,約有36個項目被選定在這次技術(shù)節(jié)上展示，所涉領(lǐng)域涵蓋自然用戶界面、語音識別、自然語言處理與機器翻譯、交互設(shè)計等領(lǐng)域。兩大轉(zhuǎn)變：1、電腦收集輸入資料(input)的方式，將從以往主要用鍵盤和鼠標輸入，轉(zhuǎn)變成除了傳統(tǒng)方式之外，另以手勢、觸控、感應(yīng)等輸入機制輔

8、助。2、電腦代理人(computer agents)：電腦從現(xiàn)在被動地聽從我們的指令行事，轉(zhuǎn)變成電腦會依據(jù)預(yù)設(shè)標準(preset criteria)代替我們行動。,,HCI人機交互應(yīng)用,三、Microsoft TechFest 2010,微軟研發(fā)策略主管Craig Mundie正在展示人機交互的新方式他表示：“過渡到自然的使用者界面(natural user interface)，將改變一切現(xiàn)有的作法，不論是學(xué)生撰寫

9、學(xué)期研究報告或打電動游戲的方式，還是科學(xué)家研究全球人口增長及其對天然資源的影響?！?,HCI人機交互應(yīng)用,三、Microsoft TechFest 2010,1、移動3維交互場(MobileSurface)通過使用攝像投影傳感系統(tǒng)能夠?qū)⑷我獾?，比如辦公桌面、餐臺、茶幾等表面或一張普通的紙變成可觸控的平臺比如用戶將手機的內(nèi)容投影到任意桌面，可以觸控或3D的手勢實現(xiàn)交互操作。,在技術(shù)節(jié)現(xiàn)場搭建的表面觸控平臺，從畫面上可以看到有兩

10、只鼓投影在了桌面上。用戶可以拿著鼓棒直接在空中或者表面敲打，后面的小屏幕會馬上重現(xiàn)你的整個演奏的樂點。如果覺得拿著鼓棒敲擊麻煩，也可以直接用手去敲打。,,HCI人機交互應(yīng)用,三、Microsoft TechFest 2010,2、置身云端——全新云計算交互體驗(Insidecloud:newinteractionfor cloud computing)云計算交互體驗，包括新型交互設(shè)備——云鼠標，信息組織形式——云界面。,每個

11、人都會有一片屬于自己的云，有一個自己的云鼠標，它是通向個人云端的鑰匙，同時它又是一個擁有6個自由度、觸控反饋體驗的自然交互設(shè)備。云界面在現(xiàn)有的二維界面的基礎(chǔ)上增加時間、空間維度，將用戶紛繁復(fù)雜的信息有機的整理在一起，并以更自然的方式呈現(xiàn)。,HCI人機交互應(yīng)用,三、Microsoft TechFest 2010,3、同聲傳譯電話(T3:TheTranslating!Telephone)該系統(tǒng)充分使用了說話人自適應(yīng)技術(shù)，以達到合理

12、的實時語音到文字轉(zhuǎn)錄的準確性。然后，又通過機器翻譯來提供語音到文本的翻譯，并進一步利用文語轉(zhuǎn)換系統(tǒng)來最終實現(xiàn)語音到語音的翻譯。,圖為德語和英語的現(xiàn)場會話演示,HCI人機交互應(yīng)用,三、Microsoft TechFest 2010,4、肌肉運動指揮計算機(InputwithMuscle-ComputerInterfaces)微軟亞洲研究院的人機交互組負責人DesneyTan博士展示了一項最新技術(shù)——將手臂的運動直接作為鼠標來使用

13、——依賴于肌肉的運動和變化來指揮計算機進行各式各樣的交互體驗。只要在手臂上戴上傳感器，可以握著電腦中的吉他自如地彈奏起來。在空中輕輕揮動手指，計算機便可以跟蹤運動手指的軌跡……等等。,HCI人機交互應(yīng)用,三、Microsoft TechFest 2010,5、基于人臉識別、事件匹配的社會化相冊聚合服務(wù)OneAlbum,可自動根據(jù)人臉、事件等條件智能聚合來自社會化相冊服務(wù)Flickr、Facebook的照片。照片的人臉識別[1]，

14、而且可從你好友的社會化相冊服務(wù)中自動去識別和你相冊中出現(xiàn)的人臉有關(guān)的照片;事件(活動、聚會)匹配，綜合拍攝日期、照片內(nèi)的人臉、照片顏色識別出同一事件的照片。再加上些社會化和自我算法改進的功能就可開始將與你有關(guān)的照片整合于OneAlbum中，這些照片可以是來自Flickr、Facebook的。更關(guān)鍵的是，OneAlbum無需人工干預(yù)，甚至你都不需要輸入描述標簽，它自動可以從照片本身的屬性中挖掘與你的有關(guān)的照片。,HCI人機交互應(yīng)用,

15、三、Microsoft TechFest 2010,6、Project Gustav是一款現(xiàn)實數(shù)字繪畫板原型項目，給予使用者最接近真實繪畫體驗，其包含目前世界最先進的自然繪圖、混色、筆觸算法。也是一款Surface衍生項目。,HCI人機交互應(yīng)用,四、人機交互的發(fā)展前景,《阿凡達》中的人機交互,HCI人機交互應(yīng)用,四、人機交互的發(fā)展前景,1.三維虛擬成像技術(shù). 在阿凡達中有多處用到這種成像技術(shù).比如要進攻大樹時所出

16、現(xiàn)的那個三維立體地圖. 三維的全息影像大概和阿凡達中的描述比較一致.2.虛擬控制技術(shù).人在機器里邊只要做什么動作機器就會有相應(yīng)的動作.但是人要在關(guān)鍵身體部位戴上動作感應(yīng)器. 以后我們操作什么大型的那些機械手的工人們就不用去掌握復(fù)雜的各種按鈕和機械手之間的關(guān)系了.只要坐到駕駛艙里邊做同樣的動作機器就動了.3.虛擬動作感應(yīng)你看在講地圖時人手直接可以伸到三維虛擬地圖中然后對于地圖進行操作.人手上也沒有戴任何傳感裝置.4.意識控