0
接上一篇，雷鋒網(wǎng)介紹了用多點觸控做大屏交互的X-Board智能茶幾，并盤點了當下在大屏幕上的各種交互方式。繼多點觸控之后，基于視覺的手勢和姿態(tài)識別也是這兩年大屏幕交互的熱點。最早普及的如Kinect，2013年最火的硬件當屬于Leap Motion，而上個月微軟發(fā)布的HoloLens則被好多業(yè)內(nèi)人士仰慕，號稱“有神一般的視覺識別技術”。而這次，雷鋒網(wǎng)采訪了uSens的費越博士，他們團隊恰好在做與HoloLens中的視覺識別非常相似的產(chǎn)品。
費越是一位研究人機交互12年的專家，前后在諾基亞、摩托、松下和亞馬遜的研究院工作，參與過很多神奇項目的項目的研發(fā)。這些神奇的項目包括一套Windows XP/2000時代便上線的3D桌面，能用空鼠操控的3D電視UI，能夠凌空互動的廣告機，視覺識別跟大屏幕互動的方式非常之多。有意思的是，我們發(fā)現(xiàn)當下并沒有普遍在大屏幕應用的這類方式，而費博士團隊現(xiàn)在主攻的方向是將視覺識別用在虛擬現(xiàn)實。
uSens（凌感科技）成立于2013年，費越是創(chuàng)始人之一，在uSens成立之前，費越以及他的團隊就致力于進行人機交互方式的研究：
2002-2004年，費越就利用業(yè)余時間開發(fā)了一套Win XP時代便上線的3D桌面；
2008年-2009年，在松下工作期間，費越和他的團隊又開發(fā)了一款觸摸式遙控器， 中間是一個常規(guī)的按鈕，兩側為觸控面板，搭配3D電視UI，實現(xiàn)智能化的人機交互；
2010年，費越又進一步研究出了集成了觸摸和空中手勢動作的三維遙控器，并制作了相結合的三維電視界面。這個系統(tǒng)提供了酷炫的體驗。 并在2012年變成產(chǎn)品開始和電視一起銷售；
2011年，費越和團隊研發(fā)出了3D虛擬現(xiàn)實墻，用戶通過體感設備，在一面100英寸的液晶屏前，通過走動、手部動作、語音可以產(chǎn)生一種沉浸式的體驗；
2012年，他們又研發(fā)了虛擬現(xiàn)實體桌面，通過頭部跟蹤實現(xiàn)了具有全息視覺效果的虛擬現(xiàn)實顯示，通過手勢識別，可以讓人直接和虛擬物體交互 （類似阿凡達里的三維地圖/沙盤）；
2013年，費和他的團隊成立了uSens，他們是在美國留學及工作多年的中國高科技工作者，有多年在硅谷世界著名大公司從事人機交互，電子產(chǎn)品設計，軟硬件設計的經(jīng)驗，uSens的核心技術是以三維手勢識別、頭部跟蹤為主的三維輸入技術和虛擬現(xiàn)實的三維輸出技術。
目前，能從uSens官網(wǎng)了解到的具體產(chǎn)品是指感一體機（FVT Fingo virtual touch ）和凌指（Fingo），F(xiàn)VT是一臺能夠"凌空互動"的廣告機；而Fingo是一個由一個小型傳感設備和一套軟件系統(tǒng)組成的體感設備。硬件主要是傳感設備，可以捕捉手指的各種形態(tài)及活動。軟件分為4個主要部分：底層的算法，用于處理手的圖像；手勢識別庫，儲存了一些人類最常用的手勢；可以給第三方二次開發(fā)使用的SDK及可編程接口；第三方可以用該接口來開發(fā)一些手勢識別的應用程序。
Fingo作為一種近距離、高精度的手勢識別設備，適用于大屏、小屏和‘無屏’；通過藍牙/Wifi方式與智能電視、手機或者平板電腦相連；提供手寫輸入，三維交互功能，Android應用可以不加改動就可以在電視上使用。
uSens的CEO何安莉告訴雷鋒網(wǎng)，目前他們正在做一款設備，并計劃將把它放到Kickstarter上進行眾籌。
Windows 和鼠標帶來個人電腦的普及，觸摸屏和 iOS/Android 帶來移動設備的全面推廣，但對于大屏幕而言，觸摸類的應用并不適合大屏幕，大屏幕的應用場景與手機、Pad等中小屏幕也不盡相同，那末，體感技術在大屏幕上能做些什么呢？
1、體驗休閑娛樂類的游戲，進行輕量運動。例如Kniect就涵蓋競速、舞蹈、格斗、冒險等眾多運動類型;
2、代替遙控器完成瀏覽、換臺、點播等功能，當你坐在沙發(fā)上看電視，可以輕輕揮手，在不同的界面之間自由操作，聽音樂、換頻道、瀏覽頁面，一應俱全。當然，語音技術也是實現(xiàn)這一操作不錯的選擇，但二者也并不矛盾；
3、玩高精度、重型游戲。輕量級的游戲可能無法滿足發(fā)燒友們的需求，隨著體感技術的發(fā)展，大屏能提供的體感游戲也會更加精彩。
費越告訴我們，體感技術在大屏幕上應用，可以通過兩種方式來實現(xiàn)，一是直接生產(chǎn)如凌指這樣的智能硬件，然后把它與電視或盒子無線連接；另一種就是與終端廠商合作，把技術集成在智能電視或者盒子中。
在費越看來，在大屏幕上進行休閑游戲以及輕度運動等，Kinect目前可以滿足使用，
Kinect這類技術分為兩部分: 1代能夠采集深度圖(depth map)的硬件，2代根據(jù)深度圖計算出人體形態(tài)動作的算法。
Kinect 1代的硬件是基于結構光方法，由以色列的PrimeSense公司開發(fā)。這類技術現(xiàn)在已經(jīng)不少公司都可以做到。但2代計算人體動作的算法技術要求很高，目前只有微軟掌握成熟的算法。
此類設備不需要任何計算機視覺方面的計算，但硬件成本高，目前的市場看，還遠不到爆發(fā)的程度，芯片設計，攝像頭的成本都比較高。而且主要的交互還是停留在大肢體動作，使得用戶體驗上不是很好，勉強應付舞蹈，運動這類應用。這個低精度嚴重限制了應用范圍，都是小眾市場。
另一類產(chǎn)品便是基于多角成像這一技術的生產(chǎn)的Leap Motion和uSens公司的Fingo。這種技術的基本原理是使用兩個或者兩個以上的攝像頭同時攝取圖像，就好像是人類用雙眼、昆蟲用多目復眼來觀察世界，通過比對這些不同攝像頭在同一時刻獲得的圖像的差別，使用算法來計算深度信息，從而多角三維成像。
費越還告訴我們，多角成像是三維手勢識別技術中硬件要求最低，但同時最難實現(xiàn)的，技術要求較高，多角成像不需要任何額外的特殊設備，完全依賴于計算機視覺算法來匹配目標，相較于結構光或者光飛時間這兩種技術成本高、功耗大的特點，多角成像能提供“價廉物美”的三維識別效果。
談到第二類實現(xiàn)方法，費越告訴雷鋒網(wǎng)，uSens更偏向于做整套系統(tǒng)，其核心商業(yè)模式是賣整機，以及授權技術。而在中國進行授權合作，卻并不容易。
以智能電視為例，已有國內(nèi)的電視制造廠商與uSens進行合作洽談，將uSens的體感技術集成在電視中，這樣既可以獲得現(xiàn)金收益，也有益于將uSens的技術向市場轉化。但鑒于廣電總局的規(guī)定，usens無法自行開發(fā)UI，只能在電視機原有的操作系統(tǒng)上進行適配，而且電視中的OS往往并不是電視硬件制造商開發(fā)，而是第三方比如阿里云OS開發(fā)。所以和智能電視的適配和整合不是一朝一夕可以完成的。因此，在授權技術方面，uSens遇到了阻力，想必這也是電視生產(chǎn)廠商遇到的阻力。
費博士告訴雷鋒網(wǎng)，體感技術不僅可以通過大屏展現(xiàn)，還可以和虛擬現(xiàn)實相結合，具體的發(fā)展方向包括：
1、休閑類的游戲，輕量級游戲，將體感技術與虛擬現(xiàn)實想結合，不一定要借助大屏才能玩游戲，可能帶上一個眼部設備，你就會有身臨其境的滲透感；
2、軍事、醫(yī)療的模擬教學，比如可以根據(jù)已有資料建模，進行模擬手術，That’s cool !
3、虛擬現(xiàn)實的界面交互，未來的UI，會從二維變?yōu)槿S，你將不僅僅在一個平面的環(huán)境里進行辦公、購物、娛樂，你去到一家餐廳，菜單是三維立體的；你在淘寶上購物，你瀏覽的每一件衣服都可以在身上試穿，等等。
系列回顧：
1、創(chuàng)新大屏交互之——你所不知道的多點觸控技術
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權禁止轉載。詳情見轉載須知。
