人機交互新時代 最前沿科技的生活應用
還在用手指在iPad上切西瓜嗎?已經OUT啦,在新的人機交互時代,只要對著屏幕在空中揮揮手,切菜、打球這些游戲輕松搞定,還可以鍛煉身體,如果再加上幾個跳躍,就可以駕駛一艘快艇穿越激流險灘,享受冒險的樂趣……
最前沿科技的生活應用
620)this.style.width=620;">
未來之家的入口,這些植物采用了RFID芯片,可以提醒主人需要多少光照和水分
看似普通的玻璃窗,當你走近時,一幅幅山水畫或奇幻的景觀緩緩變換,延伸你的視野,連同客廳的一面墻變成大自然的一個角落;如果不想看這些圖像,可以兩手做拉攏窗簾的動作,兩幅窗簾會緩緩合上蓋住這些景象,當你離開時,窗戶玻璃還原本來的透明本色,一切都像沒有發(fā)生過。
廚房里,通過投影到操作臺的桌面,可以看到圖文并茂的菜譜供你選擇,點擊喜歡的菜圖標,操作流程一目了然。正在做菜的時候,如果有電話打來,桌面上會有提示,可以隨時接聽電話。
這一切都發(fā)生在未來之家,它是位于微軟雷德蒙總部園區(qū)的一座特殊的房子,由客廳、廚房、起居室、餐廳等組成,各種未來的計算技術遍布于房間的各處。在這里,你看不到電腦,而電腦卻無處不在——在桌面、墻壁、植物,甚至裝飾畫上。你可以用手操控計算機,也可以用聲音和電腦對話。未來之家想傳達的理念是:在未來的世界,我們可以與計算機以更加自然的方式交互,計算機可以讓我們隨時獲知信息,幫助我們更好地做出決定,各種終端和顯示設備可以與我們生活的環(huán)境無縫結合……
未來之家的歷史要追溯到1994年9月,在微軟全球研究與戰(zhàn)略執(zhí)行官克瑞格·蒙迪(Craig Mundie)的主持下建成。它的設計初衷是探索未來5到10年最前沿的科技在現實生活中的應用。不過,17年里科技行業(yè)已經發(fā)生了翻天覆地的變化,未來之家也在不斷地“升級換代”,不斷探索各種概念性技術。
通過未來之家最前沿科技在生活中的應用,我們看到的是微軟Kinect技術引發(fā)的創(chuàng)新。從PC開始普及時算起, 20多年來,人們與電腦間的對話主要是通過鼠標、鍵盤進行,并日漸渴望擺脫鼠標、鍵盤的束縛,靠聲音、手勢指揮電腦。
微軟Kinect開創(chuàng)的新的人機對話方式,就試圖引領一場消費電子革命——Kinect被吉尼斯世界紀錄組織稱為史上銷售最快的電子消費產品:“從去年11月4日至今年1月3日,在60天中,微軟共售出800萬臺Kinect,平均每日售出133333臺?!边@個數字超過了蘋果公司iPhone和iPad產品發(fā)布后的同期銷售量。與任天堂推出的Wii相比,Kinect帶來的體感操控意味著游戲業(yè)一個新時代的開始。Kinect有句廣告語——“You are the controller”(你就是遙控器),而這一直是游戲迷們的夢想。
“Kinect提供了一系列新技術,諸如深度傳感、骨骼追蹤、語音和人體識別等,組成新的人機界面的基礎。而它的應用,不僅僅是游戲。”微軟全球資深副總裁張亞勤對本報記者表示,Kinect先用到游戲上面,只是一個很小的應用,以后它會被用到各種不同的設備上面,包括windows的電腦、電視、手機,這只是自然用戶界面的開始。
成為創(chuàng)新的一分子
6月,微軟向全球開發(fā)者、學術研究者和發(fā)燒友群體發(fā)布免費的基于Windows的Kinect軟件開發(fā)工具包,希望開發(fā)者借助Windows 7平臺,利用Kinect技術,創(chuàng)造在深度感應、人體運動跟蹤以及語音和物體識別等領域的全新體驗。
在SDK工具包發(fā)布前一天,微軟研究院雷蒙德總部舉行了一次別開生面的活動。
50位代碼發(fā)燒友們通過SDK工具包在緊張的24小時內,發(fā)揮自己的想象力和創(chuàng)造力,開發(fā)各種異想天開的應用。有三位研究員通過SDK制作出一架可以用身體進行控制的飛行器。他們在控制飛行器的時候,看起來就像氣功大師在遠處運功,讓該裝置懸浮起來一樣。微軟專家Joshua Blake團隊開發(fā)的應用則可以幫助人們通過姿勢和語言來指揮一個管弦樂隊。
同時,微軟亞洲研究院在中國高校學生中啟動了Kinect Pioneer項目,全國8所院校的25支隊伍積極參與了該項目,所產生的創(chuàng)意作品涵蓋了教學、商務、歷史、文化等多個領域。
愛好者們拿到了Kinect SDK工具包中驅動程序、用于獲取原始傳感器數據流的大量API、自然用戶界面、安裝程序文件及其他資源。這些信息能夠允許他們在Kinect傳感器產生的底層數據流的基礎上進行開發(fā)。這套SDK能夠跟蹤在Kinect視野中移動的一到兩名玩家的骨骼影像,這樣就可以構建身體姿勢如何控制電腦。當然,先進的噪音抑制、回聲消除以及用于識別當前聲源的波束形成技術,也是不可缺少的。
8月,這些創(chuàng)意團隊匯集微軟亞洲研究院,展示他們的成果。西安交通大學藍可演示了他們的成果“穿越”。這項應用是利用Kinect即時動態(tài)捕捉、影像辨識、麥克風輸入、語音辨識、社群互動等功能,用戶可以有三大類體驗:建立三維城市、換裝、社交。利用Kicnet三維建模功能建造自己向往朝代的城市。程序中提供各朝代的典型建筑、房間擺設等,用戶只需用手勢拖動這些建筑便可得到一個三維的城市。
“我們提供真人和卡通模式的用戶裝扮功能,你選擇喜歡的衣服、飾品、發(fā)型和妝容,便可看到自己大搖大擺地走在千年前街上?!彼{可說,利用Kinect的社群互動功能,“穿越”能讓用戶與MSN或其他平臺的好友共同體驗自己的城市,多個用戶也能在同一城市中出現,通過動作和語音交流。
藍可對此進行了演示,他對著攝像頭,電腦中一古代書生翩翩而至,藍可向前伸出右臂,書生則向前移動,向前伸出左臂,書生則向后移動,“我們想讓用戶在娛樂的同時領略不同朝代的建筑和服飾文化?!?/P>
西安電子科技大學團隊將國粹戲劇“臉譜”與Kinect技術相結合,搭建了一個讓戲曲愛好者享受虛擬演唱體驗的平臺。用戶可以用手勢來選擇自己喜愛的角色臉譜,生旦凈末丑,一應俱全,用戶可以對著屏幕表演熱愛的曲目并進行錄像。
中山大學的團隊則針對網上購物建立了虛擬網絡試衣間。該應用通過Kinect 3D捕捉技術識別出買家的人體部位后,再通過客戶端聯網獲取賣家的產品信息,對應地在視頻中給用戶“穿衣戴帽”,還可以隨意變換位置和角度,全方位感受服裝的上身效果。