眼控VR研發(fā)成功 可實(shí)現(xiàn)全視場(chǎng)角追蹤

    春節(jié)將至，到處都洋溢著濃厚的節(jié)日氣氛，七鑫易維也在新春來臨之際再放出一個(gè)好消息！目前眼控VR已經(jīng)研發(fā)成功，帶有眼球追蹤技術(shù)的VR頭顯已經(jīng)進(jìn)入測(cè)試階段，已經(jīng)可以實(shí)現(xiàn)眼控交互和局部渲染。符合新廣告法的說“這可能是”目前為止最好的眼控VR方案。

    從技術(shù)實(shí)現(xiàn)上講，VR設(shè)備上眼球追蹤的實(shí)現(xiàn)便與電腦設(shè)備上實(shí)現(xiàn)眼球追蹤有很大的不同，在VR設(shè)備上受使用條件和結(jié)構(gòu)的限制，光學(xué)設(shè)計(jì)和追蹤算法都要更加精細(xì)和復(fù)雜。因?yàn)樵谕婕沂褂肰R設(shè)備時(shí)，和人眼距離很近，瞳孔和虹膜與眼球并不在攝像頭的正面，而且還會(huì)被眼瞼和睫毛遮擋，通過傳統(tǒng)的算法很難準(zhǔn)確定位眼球，此時(shí)傳統(tǒng)追蹤方式獲取的人眼模型會(huì)凸顯出來，這時(shí)人眼轉(zhuǎn)動(dòng)就會(huì)對(duì)圖像產(chǎn)生非常大的影響，同樣的轉(zhuǎn)角造成的運(yùn)動(dòng)模糊也會(huì)變大，加大圖像處理方面的難度。為了解決這一樣的難題，我們采用了特殊的光學(xué)裝置，又針對(duì)VR設(shè)備優(yōu)化追蹤算法，這樣便可以很好的捕捉人眼的特征點(diǎn)又不影響VR的體驗(yàn)。

    全視場(chǎng)角追蹤

    在VR設(shè)備上的眼球追蹤需要追蹤的范圍非常大，幾乎達(dá)到人眼的轉(zhuǎn)動(dòng)極限，垂直30°，水平50°，完全可以覆蓋FOV大于110°的主流VR設(shè)備。我們便按照人類眼動(dòng)的極限來設(shè)計(jì)追蹤方案，這樣追蹤范圍廣，可以無死角覆蓋整個(gè)VR顯示屏幕，這在國(guó)際范圍內(nèi)的SMI，Tobii等眼球追蹤技術(shù)公司都尚未能實(shí)現(xiàn)。因此可以說七鑫易維或許是目前世界上唯一可以做到Full FOV Tracking 的眼球追蹤技術(shù)公司。

    高精度低延遲

    除了追蹤范圍，另一個(gè)非常重要的元素便是追蹤精度，尤其是在VR游戲當(dāng)中，對(duì)操作的實(shí)時(shí)性和精準(zhǔn)度要求非常高，目前七鑫易維的眼控VR算法追蹤速度為240Hz，延遲低于5ms，這樣的眼動(dòng)數(shù)據(jù)獲取速度對(duì)眼控來說非常重要，在使用過程中幾乎感覺不到延遲的存在。

    防抖追蹤算法

    由于VR設(shè)備的使用時(shí)需要佩戴在頭上，而且大部分VR應(yīng)用都必須頭部動(dòng)作的配合，此時(shí)頭動(dòng)過程中便會(huì)造成VR設(shè)備與頭部的位移變化，在這種運(yùn)動(dòng)狀態(tài)下獲取準(zhǔn)確的眼球數(shù)據(jù)，無疑是對(duì)硬件和算法最大的挑戰(zhàn)。為此我們針對(duì)VR設(shè)備的眼控方案特別加入了防抖算法，這樣玩家在使用過程中即使頭動(dòng)也不會(huì)影響眼球追蹤的精度。

    眼控VR的面市注定會(huì)為VR帶來全新的玩法，在射擊類游戲中可以由眼睛控制光標(biāo)鎖定，當(dāng)用戶閉上一只眼時(shí)自動(dòng)調(diào)出瞄準(zhǔn)鏡等，還可以根據(jù)玩家在游戲場(chǎng)景中注視點(diǎn)不同觸發(fā)不同的劇情，當(dāng)玩家注視路口時(shí)，會(huì)自動(dòng)出現(xiàn)地圖導(dǎo)航，當(dāng)注視NPC不同部位觸發(fā)不同的劇情等。除此之外眼控的交互方式還可以應(yīng)用于游戲菜單，不需要使用的菜單會(huì)自動(dòng)隱藏，使用時(shí)通過眼控觸發(fā)，使VR界面更加干凈。

    與Facebook高管合影留念

    正因?yàn)檠劭亟换タ梢越oVR帶來諸多的方便和玩法，很多VR廠商都非常重視眼控VR的研發(fā)，Oculus的老東家Facebook高管就曾與七鑫易維進(jìn)行過兩次洽談，希望將眼球追蹤技術(shù)應(yīng)用到Oculus二代產(chǎn)品中，國(guó)內(nèi)也有兩家公司正在與七鑫易維接洽，希望將眼球追蹤技術(shù)引入到下一代產(chǎn)品中，為自己的VR品牌注入新的血液。