人機(jī)交互技術(shù)和應(yīng)用的融合

1、HCI,人機(jī)交互技術(shù)與應(yīng)用的融合,米佳,技術(shù)與應(yīng)用的融合：科技改變生活,從iPhone看人機(jī)交互技術(shù)Microsoft Surface 的交互創(chuàng)意Microsoft TechFest 2010人機(jī)交互應(yīng)用的展望：《阿凡達(dá)》&《鋼鐵俠2》中的人機(jī)交互技術(shù),一、從 iPhone 看人機(jī)交互技術(shù) ——“信息就在指尖”,HCI人機(jī)交互應(yīng)

2、用,1、多觸點(diǎn)式觸摸屏技術(shù)（Multi-Touch）,檢測(cè)出屏幕上同時(shí)被觸摸到的多個(gè)點(diǎn)的位置優(yōu)勢(shì)：支持更復(fù)雜的姿勢(shì)識(shí)別(Gesture Recognition)比較：將圖片放大縮小,,HCI人機(jī)交互應(yīng)用,一、從 iPhone 看人機(jī)交互技術(shù) ——“信息就在指尖”,2、基于傳感器的隱式輸入技術(shù)方位傳感器：能夠檢測(cè)出用戶是縱向

3、 還是橫向拿著手機(jī),接近性傳感器: 可以檢測(cè)出用戶何時(shí)把iPhone拿到了耳朵附近，這樣它就可以關(guān)閉屏幕，達(dá)到省電和防止屏幕被誤觸碰的目的。環(huán)境光線傳感器: 可以感知到周圍光線的強(qiáng)度，從而可以自動(dòng)對(duì)顯示屏的亮度進(jìn)行調(diào)整,,HCI人機(jī)交互應(yīng)用,一、從 iPhone 看人機(jī)交互技術(shù) ——“信息就在指尖”,3、豐富和人性化的視

4、覺反饋,,HCI人機(jī)交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,07年上市，第一款平面電腦，結(jié)合硬件與軟件的新技術(shù)，用家可以直接用手或聲音對(duì)屏幕作出指令，觸摸和其他外在物理物來和電腦進(jìn)行交互，毋須再依賴會(huì)令手部勞損的鼠標(biāo)與鍵盤。特點(diǎn)：電腦能辨識(shí)放在Surface上的不同物體，可以啟動(dòng)不同類型的響應(yīng)，如傳送數(shù)字內(nèi)容。交互方式：多點(diǎn)輸入觸摸屏，iBar和DeLighTable,,HCI人機(jī)交互應(yīng)

5、用,二、Microsoft Surface ——新一代交互式電腦,iBar: 交互式的吧臺(tái)，臺(tái)子里面的視頻投影儀可以在乳白色的臺(tái)面上投射出各種圖案，而里面的智能跟蹤系統(tǒng)能夠察覺出碰到臺(tái)面的物體，這個(gè)輸入信號(hào)就可以讓投影儀和接觸物體進(jìn)行動(dòng)態(tài)交互，物體被照亮，臺(tái)面上不同點(diǎn)之間出現(xiàn)的光線路徑等等。DeLighTable:也是運(yùn)用光來讓物體（或者人）之間產(chǎn)生有意思的交互。表面也是一個(gè)透明塑料膜，中間為一層不透明的液體，下面為發(fā)光層，所以當(dāng)

6、有外力擠開中間的液體的時(shí)候，光就滲透出來了。,,HCI人機(jī)交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,Microsoft Surface將改變?nèi)藗冑徫?，就餐，娛樂和生活?和同伴分享你的照片，用你手指拖拽即可,,HCI人機(jī)交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,你在餐館就餐時(shí)，當(dāng)你將你的飲料放在Microsoft Surface上時(shí)，它的所有信息就會(huì)在上面呈現(xiàn)出來,,HCI人機(jī)

7、交互應(yīng)用,二、Microsoft Surface ——新一代交互式電腦,購買東西時(shí)的對(duì)比，視覺化,,HCI人機(jī)交互應(yīng)用,三、Microsoft TechFest 2010,約有36個(gè)項(xiàng)目被選定在這次技術(shù)節(jié)上展示，所涉領(lǐng)域涵蓋自然用戶界面、語音識(shí)別、自然語言處理與機(jī)器翻譯、交互設(shè)計(jì)等領(lǐng)域。兩大轉(zhuǎn)變：1、電腦收集輸入資料(input)的方式，將從以往主要用鍵盤和鼠標(biāo)輸入，轉(zhuǎn)變成除了傳統(tǒng)方式之外，另以手勢(shì)、觸控、感應(yīng)等輸入機(jī)制輔

8、助。2、電腦代理人(computer agents)：電腦從現(xiàn)在被動(dòng)地聽從我們的指令行事，轉(zhuǎn)變成電腦會(huì)依據(jù)預(yù)設(shè)標(biāo)準(zhǔn)(preset criteria)代替我們行動(dòng)。,,HCI人機(jī)交互應(yīng)用,三、Microsoft TechFest 2010,微軟研發(fā)策略主管Craig Mundie正在展示人機(jī)交互的新方式他表示：“過渡到自然的使用者界面(natural user interface)，將改變一切現(xiàn)有的作法，不論是學(xué)生撰寫

9、學(xué)期研究報(bào)告或打電動(dòng)游戲的方式，還是科學(xué)家研究全球人口增長及其對(duì)天然資源的影響?！?,HCI人機(jī)交互應(yīng)用,三、Microsoft TechFest 2010,1、移動(dòng)3維交互場(chǎng)(MobileSurface)通過使用攝像投影傳感系統(tǒng)能夠?qū)⑷我獾?，比如辦公桌面、餐臺(tái)、茶幾等表面或一張普通的紙變成可觸控的平臺(tái)比如用戶將手機(jī)的內(nèi)容投影到任意桌面，可以觸控或3D的手勢(shì)實(shí)現(xiàn)交互操作。,在技術(shù)節(jié)現(xiàn)場(chǎng)搭建的表面觸控平臺(tái)，從畫面上可以看到有兩

10、只鼓投影在了桌面上。用戶可以拿著鼓棒直接在空中或者表面敲打，后面的小屏幕會(huì)馬上重現(xiàn)你的整個(gè)演奏的樂點(diǎn)。如果覺得拿著鼓棒敲擊麻煩，也可以直接用手去敲打。,,HCI人機(jī)交互應(yīng)用,三、Microsoft TechFest 2010,2、置身云端——全新云計(jì)算交互體驗(yàn)(Insidecloud:newinteractionfor cloud computing)云計(jì)算交互體驗(yàn)，包括新型交互設(shè)備——云鼠標(biāo)，信息組織形式——云界面。,每個(gè)

11、人都會(huì)有一片屬于自己的云，有一個(gè)自己的云鼠標(biāo)，它是通向個(gè)人云端的鑰匙，同時(shí)它又是一個(gè)擁有6個(gè)自由度、觸控反饋體驗(yàn)的自然交互設(shè)備。云界面在現(xiàn)有的二維界面的基礎(chǔ)上增加時(shí)間、空間維度，將用戶紛繁復(fù)雜的信息有機(jī)的整理在一起，并以更自然的方式呈現(xiàn)。,HCI人機(jī)交互應(yīng)用,三、Microsoft TechFest 2010,3、同聲傳譯電話(T3:TheTranslating!Telephone)該系統(tǒng)充分使用了說話人自適應(yīng)技術(shù)，以達(dá)到合理

12、的實(shí)時(shí)語音到文字轉(zhuǎn)錄的準(zhǔn)確性。然后，又通過機(jī)器翻譯來提供語音到文本的翻譯，并進(jìn)一步利用文語轉(zhuǎn)換系統(tǒng)來最終實(shí)現(xiàn)語音到語音的翻譯。,圖為德語和英語的現(xiàn)場(chǎng)會(huì)話演示,HCI人機(jī)交互應(yīng)用,三、Microsoft TechFest 2010,4、肌肉運(yùn)動(dòng)指揮計(jì)算機(jī)(InputwithMuscle-ComputerInterfaces)微軟亞洲研究院的人機(jī)交互組負(fù)責(zé)人DesneyTan博士展示了一項(xiàng)最新技術(shù)——將手臂的運(yùn)動(dòng)直接作為鼠標(biāo)來使用

13、——依賴于肌肉的運(yùn)動(dòng)和變化來指揮計(jì)算機(jī)進(jìn)行各式各樣的交互體驗(yàn)。只要在手臂上戴上傳感器，可以握著電腦中的吉他自如地彈奏起來。在空中輕輕揮動(dòng)手指，計(jì)算機(jī)便可以跟蹤運(yùn)動(dòng)手指的軌跡……等等。,HCI人機(jī)交互應(yīng)用,三、Microsoft TechFest 2010,5、基于人臉識(shí)別、事件匹配的社會(huì)化相冊(cè)聚合服務(wù)OneAlbum,可自動(dòng)根據(jù)人臉、事件等條件智能聚合來自社會(huì)化相冊(cè)服務(wù)Flickr、Facebook的照片。照片的人臉識(shí)別[1]，

14、而且可從你好友的社會(huì)化相冊(cè)服務(wù)中自動(dòng)去識(shí)別和你相冊(cè)中出現(xiàn)的人臉有關(guān)的照片;事件(活動(dòng)、聚會(huì))匹配，綜合拍攝日期、照片內(nèi)的人臉、照片顏色識(shí)別出同一事件的照片。再加上些社會(huì)化和自我算法改進(jìn)的功能就可開始將與你有關(guān)的照片整合于OneAlbum中，這些照片可以是來自Flickr、Facebook的。更關(guān)鍵的是，OneAlbum無需人工干預(yù)，甚至你都不需要輸入描述標(biāo)簽，它自動(dòng)可以從照片本身的屬性中挖掘與你的有關(guān)的照片。,HCI人機(jī)交互應(yīng)用,

15、三、Microsoft TechFest 2010,6、Project Gustav是一款現(xiàn)實(shí)數(shù)字繪畫板原型項(xiàng)目，給予使用者最接近真實(shí)繪畫體驗(yàn)，其包含目前世界最先進(jìn)的自然繪圖、混色、筆觸算法。也是一款Surface衍生項(xiàng)目。,HCI人機(jī)交互應(yīng)用,四、人機(jī)交互的發(fā)展前景,《阿凡達(dá)》中的人機(jī)交互,HCI人機(jī)交互應(yīng)用,四、人機(jī)交互的發(fā)展前景,1.三維虛擬成像技術(shù). 在阿凡達(dá)中有多處用到這種成像技術(shù).比如要進(jìn)攻大樹時(shí)所出

16、現(xiàn)的那個(gè)三維立體地圖. 三維的全息影像大概和阿凡達(dá)中的描述比較一致.2.虛擬控制技術(shù).人在機(jī)器里邊只要做什么動(dòng)作機(jī)器就會(huì)有相應(yīng)的動(dòng)作.但是人要在關(guān)鍵身體部位戴上動(dòng)作感應(yīng)器. 以后我們操作什么大型的那些機(jī)械手的工人們就不用去掌握復(fù)雜的各種按鈕和機(jī)械手之間的關(guān)系了.只要坐到駕駛艙里邊做同樣的動(dòng)作機(jī)器就動(dòng)了.3.虛擬動(dòng)作感應(yīng)你看在講地圖時(shí)人手直接可以伸到三維虛擬地圖中然后對(duì)于地圖進(jìn)行操作.人手上也沒有戴任何傳感裝置.4.意識(shí)控