0
| 本文作者: 劉芳平 | 2016-08-26 11:15 |

大概是眾多的公司都意識到了移動VR缺少交互的問題,各種各樣的交互方案在今年層出不窮。有直接將 Outside in空間定位做到一體機上的;有Leap Motion、uSens、微動等做雙目攝像頭手勢追蹤的;還有用英特爾用RealSense做的Inside out空間定位,Google Daydream用的3自由度手柄等等。
現在又有一家國內創業公司進入了這個領域,做了一套基于手機攝像頭的移動VR交互方案。這家北京的創業公司名叫英梅吉,其做的產品叫Hand CV。與前述各種交互方案相比,Hand CV最大的特點是輕,不需要額外的硬件設備,僅通過手機的攝像頭和軟件來實現,而且還是免費授權的。
所謂的輕手勢交互自然是相對于重手勢交互而言的,在英梅吉的CEO朱郁叢看來,Leap Motion、uSens這類就屬于重手勢交互,它們不僅需要額外的硬件輔助,而且功耗和性能需求都要更大。

具體到實際功能上,重手勢交互追蹤雙手手指關節的運動,希望在虛擬世界中重現你的雙手,就像上圖中 Leap Motion 的一個Demo演示的那樣。而Hand CV所做的輕手勢交互,是通過不同的手勢來實現選擇、點擊、拖拽等基本操作,正如下面這個視頻所演示的。
舉個例子,通過 Leap Motion 你可以用手在虛擬世界里拿起一個物體并把它扔出去,但用Hand CV做不到這點,因為單目攝像頭得不到精確的深度信息,雖然通過圖像識別算法也能計算出模糊的深度數據。
根據官方介紹,Hand CV所使用的技術是:
通過普通攝像頭采集畫面,逐幀進行手掌檢測、分割。對分割出來的信息通過k-cos等聚類算法對目標檢測物做特征提取,最后將提取的特征做為手勢識別的數據。手勢識別部分采用了隱馬爾可夫模型對大量識別樣本數據進行反復訓練。
Hand CV 2.0版本預計將支持的手勢類型下圖中所示的幾種(暫擬),而朱郁叢表示廠商可以根據自己的需求對手勢進行定制。

這款產品會首先支持iOS設備,主要是因為蘋果的硬件比較單一穩定。功耗上,對于使用A8處理器設備,它會消耗8%到10%的性能。為了降低功耗,它在“待機”狀態下每2到3秒抽取一幀攝像頭畫面,而使用時則是12幀每秒的頻率。
該公司計劃在9月份在App Store上線一個產品Demo,同時也會放SDK出來,正式版本預計將在今年年底到明年年初發布。
小編對Hand CV進行體驗后發現,整體操作十分簡單,上手起來很快,只需要記住幾個手勢就行,而手勢識別的速度和精度都還不錯。
在推廣這款產品上,英梅吉采用免費授權的模式,正在合作的廠商包括優酷、哈視奇等。內容廠商只需將Hand CV置入到自家的App中,就能讓VR手機盒子用戶實現手勢操控。視頻方面是播放、暫停和拖動,而游戲針對的通常是一些輕交互的小游戲,例如卡牌。
不過,這項技術也會遇到所有計算機視覺(CV)技術會遇到的問題,不管是單目還是雙目攝像頭,在極暗光、強光以及嘈雜的環境中都可能會遇到識別不了的問題。對此,朱郁叢表示他們正在建立一個擁有10萬張的手勢模型的庫,希望通過深度學習提高技術的魯棒性。

朱郁叢表示英梅吉的目標是成為ARVR基礎交互技術的供應商,而且他認為VR只是一塊,未來其技術在AR方面的價值會大得多。目前該公司已將技術授權給AR眼鏡廠商影創科技。
除了基礎交互,朱郁叢還透露,公司在與萬事達卡合作開發VR支付方面的產品,主要是手勢密碼。此外,該公司也希望將技術應用到汽車、機器人等產品上面。
收入方面,英梅吉目前并不打算從ARVR內容廠商那里賺到錢,而是希望在獲得足夠大的市場份額之后再來考慮盈利的事。與此同時該公司也在與知識產權代理公司合作,希望通過做一些技術授權來獲得收入,例如讓手機廠商在產品中置入自家的技術。
英梅吉2014年由CEO朱郁叢和CTO李小波聯合創立,一直從事計算機視覺方面的技術開發,此前開發過AR購物方面的產品,但今年已經將全部精力放在Hand CV這款產品上。
對于接下來的前進方向,朱郁叢表示首先是把手勢識別做好,其它的計算機視覺技術也會去探索,但目前還沒有其它的產品方向。他表示做技術不是為了炫技,而是要有好的應用場景。另外,他認為Slam對創業公司的價值已經結束,現在做太遲了。
之所以押注Hand CV,朱郁叢認為是因為這款產品抓住了移動VR體驗的用戶痛點。他認為輕交互是單目的市場,重交互是手柄的市場,而基于深度攝像頭的手勢追蹤,其定位是錯誤的,不會有足夠的市場。
在沉浸感看來,用手勢去代替目前手機盒子通過“轉頭+一個點擊按鍵”或是“轉頭+觸摸板”的交互設計看起來是個不錯的方案,但是否能受到用戶的認可,還需要產品推出后的進一步觀察。
雷峰網原創文章,未經授權禁止轉載。詳情見轉載須知。