七鑫易維黃通兵:追求更自然的人機(jī)交互,眼球追蹤技術(shù)正在路上

巫盼 8年前 (2017-08-18)

“行業(yè)內(nèi)的公司既有被收購(gòu)的,也有自己獨(dú)立上市的,所以一切皆有可能吧?!?/p>

最近,微軟在win 10 的最新版本中,加入了“眼球追蹤”功能,通過(guò)凝視來(lái)完成一些基本的文本輸入操作,而之所以會(huì)增加這個(gè)功能,微軟表示想要幫助那些患有神經(jīng)肌肉疾病的人,比如漸凍癥患者,讓他們直接用眼神和系統(tǒng)中各種元素交互。

眼球追蹤技術(shù)似乎正在一點(diǎn)點(diǎn)侵入到我們的生活。去年,七鑫易維推出了全球首款VR眼球追蹤模組aGlass,展現(xiàn)了他們的注視點(diǎn)渲染、眼控交互和眼動(dòng)數(shù)據(jù)分析三大“黑科技”。

從最早的醫(yī)療輔具到PC上的輔助再到虛擬現(xiàn)實(shí)體驗(yàn),今天我們就和七鑫易維的創(chuàng)始人黃通兵聊聊眼球追蹤技術(shù)。

被收購(gòu)or自己成長(zhǎng)壯大,一切皆有可能

黃通兵是在2009年創(chuàng)建的七鑫易維,最初的時(shí)候他也沒(méi)想到自己會(huì)出來(lái)創(chuàng)業(yè)。

在沈陽(yáng)航空航天大學(xué)任職期間,黃通兵搗鼓了一些項(xiàng)目,然后無(wú)心插柳柳成蔭,他成功地將自己做的軟件賣(mài)給了一家軍工企業(yè)。

七鑫易維黃通兵:追求更自然的人機(jī)交互,眼球追蹤技術(shù)正在路上

(七鑫易維創(chuàng)始人&CEO黃通兵)

而黃通兵最先研究的是偏戰(zhàn)斗機(jī)飛行器相關(guān)的眼控技術(shù),“當(dāng)時(shí)眼球追蹤是飛行員軍用瞄準(zhǔn)頭盔上一個(gè)在研的技術(shù)。”

卸下老師的身份后,黃通兵在工作上也遇到不少坑,但也正是那些路上的荊棘,有了今天的七鑫易維。

“其實(shí)公司成立之初,就是從這種穿戴式的頭顯出發(fā),當(dāng)時(shí)主要用于醫(yī)療輔具上,后來(lái)包括普通的臺(tái)式一體機(jī)這些”,七鑫易維創(chuàng)建后不久,他們就成功地把眼控儀銷(xiāo)售給ALS人群(漸凍人),并且與相關(guān)的殘疾人協(xié)會(huì)進(jìn)行合作。

而隨著近幾年VR/AR突然竄頭,眼球追蹤技術(shù)也看到走向消費(fèi)級(jí)應(yīng)用的曙光,七鑫易維自然不會(huì)錯(cuò)過(guò)這次機(jī)會(huì)。所以他們也順勢(shì)推出了首款VR眼球追蹤模組aGlass。

七鑫易維黃通兵:追求更自然的人機(jī)交互,眼球追蹤技術(shù)正在路上

(全球首款VR眼球追蹤模組aGlass)

但是將這個(gè)有點(diǎn)黑科技概念的技術(shù)做到一個(gè)消費(fèi)級(jí)水平并不是容易的事情,這也是為什么行業(yè)內(nèi)會(huì)連續(xù)出現(xiàn)大公司收購(gòu)技術(shù)創(chuàng)企的新聞:

2017年6月,蘋(píng)果收購(gòu)了專(zhuān)注于眼球追蹤技術(shù)的德國(guó)公司SensoMotoric Instruments;

2016年12月,F(xiàn)acebook收購(gòu)了眼球追蹤公司The Eye Tribe;

2016年10月,谷歌收購(gòu)了眼球追蹤技術(shù)公司Eyefluence。

科技巨頭們?cè)谑召?gòu)的同時(shí),與眼球追蹤相關(guān)的一系列專(zhuān)利也悉數(shù)收入囊中,由此可見(jiàn)眼球追蹤的技術(shù)門(mén)檻也非常高。

當(dāng)問(wèn)到七鑫易維之后會(huì)不會(huì)委身于大公司,黃通兵打了個(gè)‘馬虎眼’,“行業(yè)內(nèi)的公司既有被收購(gòu)的,也有自己獨(dú)立上市的,所以一切皆有可能吧。”

千人有千眼,先從基礎(chǔ)的數(shù)據(jù)采集開(kāi)始

眼球追蹤技術(shù)的門(mén)檻高,直到現(xiàn)在技術(shù)本身也沒(méi)有一個(gè)完整的解決方案,而眼球的數(shù)學(xué)模型目前也不完備。

七鑫易維黃通兵:追求更自然的人機(jī)交互,眼球追蹤技術(shù)正在路上

如黃通兵所說(shuō),“千人有千眼,每個(gè)人的眼睛都是獨(dú)一無(wú)二的,有的眼睛斜視,有的眼睛近視或者遠(yuǎn)視,甚至還有一些眼部的疾病。同時(shí)戴眼鏡的情況也特別多。在這種情況下,要做全眼球相關(guān)的數(shù)據(jù)也是一個(gè)難度大,且需要長(zhǎng)期積累的事情。”

以數(shù)據(jù)采集為例,七鑫易維最初將眼球追蹤技術(shù)應(yīng)用到醫(yī)療領(lǐng)域的時(shí)候,就已經(jīng)有計(jì)劃地采集一些數(shù)據(jù),尤其是比較特殊的一些眼球方面,“這么多年,我們一直在積累這方面的數(shù)據(jù)。”

當(dāng)然,這也是七鑫易維和其他競(jìng)爭(zhēng)對(duì)手相比所保有的優(yōu)勢(shì)。

從2014年到2016年,七鑫易維相繼得到高通、中興合創(chuàng)、國(guó)科等知名機(jī)構(gòu)的投資,所以在芯片以及核心傳感器方面,他們都會(huì)有全面的資源和國(guó)際巨頭公司的背書(shū)。

基于此,七鑫易維的眼球追蹤模組aGlass的DK1版本很快得到HTC Vive的官方認(rèn)可,“作為首款眼球追蹤配件,我們推出市場(chǎng)后更多的是起到教育市場(chǎng)和培育開(kāi)發(fā)者的作用。”黃通兵介紹,他們正在準(zhǔn)備DK2的版本。相比較之前主要面向開(kāi)發(fā)者的版本,新的追蹤模組推出的同時(shí)會(huì)附帶相關(guān)的內(nèi)容體驗(yàn),包括一些基于眼動(dòng)數(shù)據(jù)的個(gè)性化服務(wù)。

其實(shí)從鎂客君的體驗(yàn)來(lái)看,很少能看到帶有眼球追蹤的VR內(nèi)容,黃通兵也是心有戚戚,“內(nèi)容體驗(yàn)方面目前還沒(méi)有特別面向大眾的應(yīng)用推出,推出眼球追蹤模塊也是為了讓開(kāi)發(fā)者更快熟悉技術(shù),只有不斷出現(xiàn)新的內(nèi)容支持眼球追蹤技術(shù),才可能讓消費(fèi)者真正去接受并且把這個(gè)東西玩起來(lái)。

等待眼球追蹤技術(shù)來(lái)改寫(xiě)更自然的人機(jī)交互

雖然現(xiàn)階段用眼球追蹤交互的內(nèi)容還比較少,但不可否認(rèn)眼球追蹤帶來(lái)的是更加自然的人機(jī)交互體驗(yàn),從這個(gè)角度來(lái)看,它非常適合于一些VR場(chǎng)景。

七鑫易維黃通兵:追求更自然的人機(jī)交互,眼球追蹤技術(shù)正在路上

(眼控交互)

“在現(xiàn)有的一些VR游戲中,瞄準(zhǔn)都是一個(gè)大難題,你得拿著方向鍵或者晃頭,這些都沒(méi)有只用眼球直接瞄準(zhǔn)來(lái)的爽。”黃通兵認(rèn)為,對(duì)于VR/AR來(lái)說(shuō),眼球追蹤是最好的人機(jī)交互之一,而且相比語(yǔ)音、手勢(shì)識(shí)別以及帶有外設(shè)的其他交互方式,它也更加適合穿戴式的環(huán)境。

黃通兵說(shuō)了幾個(gè)實(shí)際應(yīng)用的例子:比如體驗(yàn)一些VR游戲,眼睛看著目標(biāo)就可以鎖定,而在一些驚悚類(lèi)的游戲中,可以設(shè)計(jì)出這樣一種機(jī)制,當(dāng)出現(xiàn)恐怖情節(jié)的時(shí)候,玩家閉上眼不敢看,就會(huì)觸發(fā)掉血的機(jī)制。

問(wèn)題來(lái)了,如果僅僅依靠眼球的運(yùn)動(dòng)來(lái)完成所有的交互,造成視覺(jué)疲勞會(huì)怎么辦?

黃通兵表示,基于眼球追蹤的交互更多是一種“弱交互”,它不是讓玩家一直“拼命”地盯著目標(biāo)物體。“我們把眼球追蹤定義成用戶在潛意識(shí)中就可以進(jìn)行的操作,我們會(huì)在后臺(tái)分析大量的眼動(dòng)數(shù)據(jù),當(dāng)觸發(fā)相應(yīng)的操作,其實(shí)他們并不一定可以察覺(jué)到。而且在具體的應(yīng)用中,眼球追蹤只是起瞄準(zhǔn)作用,射擊之類(lèi)的操作還是要通過(guò)手柄來(lái)完成。”

七鑫易維黃通兵:追求更自然的人機(jī)交互,眼球追蹤技術(shù)正在路上

(注視點(diǎn)渲染技術(shù))

眼球追蹤技術(shù)之于VR,不僅僅交互方式上的創(chuàng)新,其中涉及到的注視點(diǎn)渲染技術(shù),也能從底層去減少GPU資源的消耗。黃通兵介紹,“通過(guò)注視點(diǎn)渲染技術(shù),我們直接把渲染量減少,在提升性能的同時(shí),減少GPU的載荷。以VRFunhouse為例,本來(lái)需要雙1080顯卡才能流暢運(yùn)行的場(chǎng)景,應(yīng)用注視點(diǎn)渲染技術(shù)后,使用單1070顯卡就可以讓場(chǎng)景流暢運(yùn)行,渲染幀率從45幀左右提升到將近90幀,延遲則由23ms左右降低到11ms左右。這樣的表現(xiàn)在GTC大會(huì)上也得到了NVIDIA CEO黃仁勛的肯定與支持”

從整個(gè)行業(yè)來(lái)看,眼球追蹤技術(shù)還處在一個(gè)成長(zhǎng)期,相比較手勢(shì)識(shí)別這些交互方式,發(fā)展的步伐可能會(huì)稍慢一些。黃通兵深諳此理,所以七鑫易維的下一步計(jì)劃是將眼球追蹤技術(shù)推廣到消費(fèi)級(jí)的VR/AR設(shè)備上,鼓勵(lì)開(kāi)發(fā)者圍繞它做出更多的應(yīng)用,從而推動(dòng)眼球追蹤技術(shù)地不斷成熟。

結(jié)語(yǔ):

在鎂客君采訪的諸多技術(shù)創(chuàng)企中,七鑫易維的眼球追蹤技術(shù)應(yīng)該是離消費(fèi)者最遠(yuǎn)的VR/AR技術(shù)之一,所以它的發(fā)展以及成長(zhǎng)空間非常大。但是另一方面,我們也看到隨著VR這樣新興產(chǎn)業(yè)的到來(lái),也正在讓更多黑科技一點(diǎn)點(diǎn)揭開(kāi)神秘的面紗,朝著平民化、消費(fèi)級(jí)方向發(fā)展。

當(dāng)然,技術(shù)的推廣和應(yīng)用也需要找到一個(gè)合適的場(chǎng)景,然后不斷去磨合。關(guān)于這個(gè)問(wèn)題在鎂客網(wǎng)9月8日協(xié)辦的虛擬現(xiàn)實(shí)發(fā)展大會(huì)上也會(huì)深入地探討,感興趣的不妨來(lái)現(xiàn)場(chǎng)聽(tīng)聽(tīng)像七鑫易維這樣的技術(shù)創(chuàng)企現(xiàn)身說(shuō)法。


【鎂客·請(qǐng)講】專(zhuān)注于報(bào)道科技創(chuàng)新項(xiàng)目;我們敞開(kāi)心扉面對(duì)每一位創(chuàng)業(yè)者,力求為您呈現(xiàn)一群鮮活、有性格的品牌和人物;我們傾聽(tīng)創(chuàng)業(yè)故事和人生經(jīng)歷、探討商業(yè)模式和行業(yè)趨勢(shì)、對(duì)接資本市場(chǎng)和供需雙方,以期為產(chǎn)業(yè)發(fā)展注入新的活力。

歡迎做客【鎂客·請(qǐng)講】,欄目合作請(qǐng)發(fā)送郵件至:post@im2maker.com

最后,記得關(guān)注微信公眾號(hào):鎂客網(wǎng)(im2maker),更多干貨在等你!

鎂客網(wǎng)


科技 | 人文 | 行業(yè)

微信ID:im2maker
長(zhǎng)按識(shí)別二維碼關(guān)注

硬科技產(chǎn)業(yè)媒體

關(guān)注技術(shù)驅(qū)動(dòng)創(chuàng)新

分享到