本文以蘋果 Vision Pro 的眼動交互功能為主要討論內(nèi)容，分享眼動交互這一功能中存在創(chuàng)業(yè)的機會。作者從六個層面出發(fā)做具體分析，可以給不同創(chuàng)業(yè)方向的伙伴提供一些參考建議，希望能對你有啟發(fā)。

蘋果 Vision Pro 的亮相，將眼動追蹤技術(shù)融入進了核心交互中，Vision Pro 拋棄掉了傳統(tǒng)的手柄，利用“眼動追蹤+手勢+語音”多模態(tài)的交互方式，用眼睛的轉(zhuǎn)動來選擇交互的對象，用手勢來確定或者切換，眼動交互的重要度上升到了前所未有的高度。

蘋果產(chǎn)品的很多特性往往會成為業(yè)界標準，慢慢出現(xiàn)在各類 AR 設備里，國內(nèi)在 AR 上有所布局的大廠大概率會緊鑼密鼓的在眼動追蹤技術(shù)上加大研發(fā)力度。因此眼動硬件逐漸成為標配已經(jīng)成為無可爭議的事實。

圖源：蘋果官網(wǎng)

交互技術(shù)的重大改變，往往伴隨著巨大的創(chuàng)業(yè)機會。例如以鍵盤和鼠標作為基礎誕生 PC 電腦，進而誕生了大量基于鼠標鍵盤的圖形化軟件；例如以全面屏多點觸控作為基礎誕生了iPhone，基于觸摸交互誕生了大量的 APP 應用。

而且如今各個互聯(lián)網(wǎng)大廠所分析的用戶數(shù)據(jù)、精準營銷、廣告推送，都是需要用戶付諸明確的交互行為才可以獲得。

試想一下如果未來AR眼鏡硬件性能進一步成熟，那么在未來基于眼動交互可能會有那些?APP 和創(chuàng)業(yè)機會呢？

一、眼動識圖

圖源：電影《大黃蜂》

在眼動追蹤技術(shù)中，大家常聽說注視點渲染，也就是實現(xiàn)眼睛看哪里圖像渲染哪里進而降低了計算機的功耗和算力。但是大家可能不常聽過的是-注視點圖像識別，也就是實現(xiàn)眼睛看哪里圖像識別哪里。

例如，蘋果 Vision Pro 的前置攝像頭實現(xiàn)的 AR 透視，再結(jié)合注視點圖像識別可以間接的將眼睛注視點映射在現(xiàn)實世界，從某種意義上來說，這是讓計算機在以用戶的第一人稱視角在感知并理解用戶的所聞所見。

那么如果計算機能夠以用戶的視角在感知世界，見你所見，思你所思，那么 AR 眼鏡能夠為用戶提供的個性化服務的想象空間實在是很大了。

那么想象空間有哪些？其中就包括筆者早年曾探索 AR 眼鏡的識圖購物。

圖源：陳濤

上圖是本人早年基于 Magic Leap One 研發(fā)的基于眼動識圖購物的應用場景，圖中白圈是用戶的注視點，此時用戶正在看著一架無人機，實現(xiàn)了對無人機圖像信息的 AI 搜索，下單購買，虹膜身份識別，模擬了用戶通過 AR 眼鏡眼動的整個購物過程。

基于注視點圖像識別實現(xiàn)眼動購物。通俗一點解釋就是看什么買什么。

例如，當一名男性用戶在大街上看到一輛迎面駛來的新款汽車非常感興趣，智能眼鏡通過眼動追蹤獲取此時的眼動行為判斷用戶正在對目前注視的目標圖像感興趣，AR智能眼鏡獲取用戶注視區(qū)域的汽車圖像，將圖像通過網(wǎng)絡上傳到云端計算機進行圖像識別，識別出和感興趣汽車一模一樣的產(chǎn)品或者相似的商品。

當然商品不局限于汽車，還可以是數(shù)據(jù)庫記錄的任意產(chǎn)品。在一定程度上也可以理解成淘寶的拍立淘功能與眼動追蹤結(jié)合在智能眼睛上呈現(xiàn)，這是潛在未來一種全新的購物體驗。

或許在不久的將來，雙十一不再是剁手，可能還需要挖眼了?。。。。?！

總結(jié)來說，通過注視點圖像識別技術(shù)能夠最直接、最流暢的方式將用戶、AR眼鏡、物理世界三者聯(lián)系在一起，基于這個思路還有大量的應用場景和工具型 APP 可以思考。

例如可以把現(xiàn)在的圖像識別的應用結(jié)合眼動注視點引導再實現(xiàn)一次，看哪里翻譯哪里，看哪里哪里彈出評論、彈幕等。

例如，用戶在超市選購蔬菜，當用戶看到某個蔬菜時。是否可以為其提供今晚的菜譜做法、熱量提示、健康搭配。

再比如今年爆火的 ChatGPT，AI 已經(jīng)可以對圖像中的場景進行理解，那么和 AR 眼鏡的眼動追蹤結(jié)合又能產(chǎn)生什么樣的應用？可以想象眼動追蹤是未來互聯(lián)網(wǎng)的潛在理想“流量入口之一”。

二、眼動數(shù)據(jù)應用

回顧前 20 年的互聯(lián)網(wǎng)發(fā)展，互聯(lián)網(wǎng)產(chǎn)品的商業(yè)模式可以大致分為廣告收益、收中介費、以及近幾年才流行的為產(chǎn)品本身價值付費。并且廣告收益是早期 PC 互聯(lián)網(wǎng)產(chǎn)品的主要營收來源，至今廣告收益也占據(jù)了半壁江山。

后來移動互聯(lián)網(wǎng)興起，通過手機可以追蹤到個人用戶，因此廣告的推送講究精準推送，通過 APP 收集用戶的數(shù)據(jù)，進行用戶畫像分析，進而實現(xiàn)廣告的精準推送。

以 Facebook 為例，旗下矩陣產(chǎn)品有 Facebook 主應用、Instagram、WhatsApp、 Messenger 以及其他多款工具和服務。

這些應用都可以收集多種類型的用戶數(shù)據(jù)，以下是幾個關鍵的類別：

• 用戶基本信息：包括姓名、年齡、性別、職業(yè)、教育背景、地理位置等。
• 社交網(wǎng)絡數(shù)據(jù)：用戶的朋友列表、關注的人或頁面、分享和評論的內(nèi)容，以及用戶在這些社交媒體平臺上的其他互動。
• 用戶行為數(shù)據(jù)：包括用戶在應用中的瀏覽歷史、點擊行為、使用頻率、停留時間等。
• 用戶偏好和興趣：根據(jù)用戶的搜索歷史、瀏覽內(nèi)容、分享和點贊的帖子等來推斷。
• 設備信息：包括設備型號、操作系統(tǒng)、瀏覽器類型、IP地址、移動網(wǎng)絡信息等。

我將上述的用戶數(shù)據(jù)都歸為傳統(tǒng)數(shù)據(jù)，因為這些數(shù)據(jù)獲取的前提是需要用戶經(jīng)過主觀思考并且付諸于交互行為輸入到計算機中。

例如上文提到的“用戶行為數(shù)據(jù)”和“用戶偏好和興趣”。但是反觀眼動數(shù)據(jù)，它不僅僅可以獲取用戶主觀意識層面的行為數(shù)據(jù)，而且還可以獲取潛意識層面的數(shù)據(jù)。

例如當我們看到一款心儀的新款汽車，人看的那一瞬間，人眼瞳孔直徑的變化、眼跳的速度、眼跳距離、平滑追視的行為等都可能會有相應的變化，重點是這些行為人類不能自己自由控制，是客觀生理的反應。也就是說眼動數(shù)據(jù)獲取可以挖掘用戶不經(jīng)意之間的喜好、情緒等情感數(shù)據(jù)。

當然眼動數(shù)據(jù)的分析挖掘前提一定是建立在用戶隱私保密技術(shù)和用戶許可的情況下，正是因為眼動數(shù)據(jù)的潛在價值、侵入性都是前所未有的，所以蘋果并沒有開放眼動數(shù)據(jù)，或許可能是目前現(xiàn)有技術(shù)、監(jiān)管、用戶心智還有沒有準備好利用眼動數(shù)據(jù)。

三、眼動數(shù)據(jù)隱私安全

在上文中提到眼動數(shù)據(jù)的存在巨大商業(yè)價值的同時，也存在更大隱私安全風險。比如單從注視點位置一種眼動數(shù)據(jù)，就可統(tǒng)計分析知道你對某一種事物的特定視覺偏好。

例如某種設計風格的商品，是沉穩(wěn)的、性感的、創(chuàng)意的、自由的、新中式的等等，往往人們對產(chǎn)品風格的偏好也與用戶的性格和自我認知有相關性。

甚至對戶外廣告?zhèn)髅叫袠I(yè)也是一種全新變革，因為傳統(tǒng)戶外廣告行業(yè)的廣告效果是難以統(tǒng)計和量化的，他不像手機 APP 上的廣告本身就是數(shù)據(jù)很好統(tǒng)計，但是在未來的更先進小巧的 AR 眼鏡再結(jié)合眼動追蹤，戶外傳媒將迎來變革。

例如當 AR 眼鏡用戶看到某一塊戶外廣告牌，不僅可以為用戶呈現(xiàn)更多的內(nèi)容，還可以戶外廣告的曝光度進行數(shù)據(jù)統(tǒng)計。

再比如在先進智能制造行業(yè)也可能會有積極的作用，在產(chǎn)品制造或者備貨過程中，對于一件商品可能需要準備多種不同顏色、不同款式以適應不同客戶細微差異，但是每種不同款式分別生產(chǎn)多少件？

倉庫分別存儲多少貨物一直是商家們的痛點，不然哪里來的雙十二。但是結(jié)合 AR 眼鏡的眼動追蹤技術(shù)就可以最高低成本的方式統(tǒng)計分析大量用戶商品視覺偏好，進而指導生產(chǎn)備貨，類似商家付費請大量用戶做產(chǎn)品視覺偏好的調(diào)查問卷，用戶則可以通過授權(quán)眼動數(shù)據(jù)用于分析獲得“收益”

但是，蘋果目前并沒有把眼動數(shù)據(jù)開放出來，Vision Pro 眼動追蹤所帶來的隱私問題，這也是產(chǎn)品發(fā)布會上所強調(diào)的重點之一。

Mike Rockwell 透露，Vision Pro 的解決方案是把眼動數(shù)據(jù)進行隔離并在后臺進行單獨處理，蘋果稱只有當用戶進行雙指捏合操作時才會釋放結(jié)果，這樣就很好規(guī)避了 APP 和網(wǎng)站獲取隱私問題。

圖源：蘋果官網(wǎng)

我的個人觀點：雖然蘋果目前沒有開放眼動數(shù)據(jù)給開發(fā)者，但是我覺得在大趨勢上一定會逐步開放給開發(fā)者，但是一定對使用眼動數(shù)據(jù)的開發(fā)者的要求和限制極高，當然也不排除蘋果自己使用的可能。因為眼動數(shù)據(jù)的潛在商業(yè)價值太大了，即使有風險有困難，但一定會在利益驅(qū)使下得以解決，通過技術(shù)和制度的監(jiān)管完善眼動數(shù)據(jù)管控。

我想要引出的創(chuàng)業(yè)機會就是關于眼動數(shù)據(jù)隱私保護的相關技術(shù)，例如通過區(qū)塊鏈技術(shù)讓用戶對自己的隱私數(shù)據(jù)有絕對的掌控權(quán)，而不是屬于某一家公司，用戶可以將自己的眼動數(shù)據(jù)授權(quán)給某個 APP 分析使用，第三方企業(yè)對自己的眼動數(shù)據(jù)做了那些使用可以不可篡改的顯示出來，企業(yè)使用了個人數(shù)據(jù)后還可以獲得利潤分成。

如果用戶對自己的數(shù)據(jù)能夠完全掌握，充分了解，能夠做到這一點我相信用戶對眼動數(shù)據(jù)的隱私排斥心理可以極大的緩解。所以眼動隱私數(shù)據(jù)保護、確權(quán)等方面是個有待解決的創(chuàng)業(yè)方向。

在未來得眼動數(shù)據(jù)者可得未來互聯(lián)網(wǎng)的天下，得隱私保護者可得眼動數(shù)據(jù)。

四、眼動滑動輸入法

圖源：蘋果官網(wǎng)

Vision Pro 輸入文字的方式：一種是在空中漂浮的虛擬鍵盤，虛擬鍵盤可以讓用戶用手指在空中輸入文字。

在互聯(lián)網(wǎng)初期有大家熟悉的搜狗輸入法，以輸入法作為流量入口，通過搜索、廣告、游戲等多種方式實現(xiàn)盈利。那么基于眼動交互是否存在某種輸入法產(chǎn)品？

目前蘋果 Vision pro 正在使用的手勢識別和傳統(tǒng)的 QWERTY 鍵盤布局作為文字的輸入。但是實際上在未來手勢識別的鍵盤輸入方式不能夠覆蓋全部的生活場景。

比如想象一下在擁擠地鐵車廂內(nèi)，很難想象所有人都通過手勢識別實現(xiàn)頭顯的交互和文本輸入，因此在一些特定場景需要純眼動交互來進行補充。

當然如果要高效的辦公還是需要物理鍵盤，如果是在不方便說話或公共的場景則適合使用眼動交互進行快速鍵盤文字輸入，用眼睛鍵入字母需要解決技術(shù)問題有：

1. 在輸入過程中需要區(qū)分開眼睛的有意識的交互行為和無意識行為，有意識行為例如眼睛的交互行為，無意識例如視覺搜索行為。無意識注視行為會干擾對目標鍵的鍵入。

圖源：陳濤

2. QWERTY 全鍵盤布局并不適用于眼動輸入，因為 QWERTY 全鍵盤上眼動滑行輸入中，一次長距離的眼跳需要跨過太多鍵位，在眼跳過程中掠過太多無用的字符鍵位可能會造成誤觸鍵位，以至于輸入錯誤的字符，這也會增加鍵入錯誤字符的幾率，降低眼動滑動輸入的體驗。

圖源：VR陀螺

3. QWERTY 全鍵盤布局是長方形的，長方形鍵盤可能會超出用戶的視野范圍，需要用戶調(diào)整頭部視角來進一步實現(xiàn)眼動輸入，這是需要完善的體驗。如 SideQuest 有一款眼動追蹤打字 demo《Eye Tracking Keyboard》，可以發(fā)現(xiàn)通過眼動鍵入并不是很精準，另外需要一直轉(zhuǎn)動頭部來調(diào)整視野，本人認為更好的交互體驗是盡可能少的讓用戶付出精力和運動。

眼動滑行輸入法，圖源：陳濤

本人認為需要有新的鍵盤布局來適應眼動鍵盤輸入，QWERTY 全鍵盤布局的權(quán)威地位是由于人們近百年來養(yǎng)成了不可撼動的使用習慣，促就如今地位。

但是事實上如今 QWERTY 全鍵盤布局設計的初衷并不是為了幫助人們提高輸入高效，而是機械式打字機為了降低在快速輸入過程中容易出現(xiàn)的機械故障，因而設計成如今我們通用的反人類鍵盤布局。

但是完全用眼睛去輸入文本是全新交互習慣，面對普通消費者則要追求交互的效率，所以有機會開辟出一種全新的基于眼動交互的輸入法，并且眼動交互還存在大量的技術(shù)問題有待解決，所以是存在新的機會的。

五、眼動人機識別

Vision Pro 眼鏡對比于電腦、手機的 2D 屏幕內(nèi)容呈現(xiàn)形式和交互方式發(fā)生了巨大的變化。

例如 Vision Pro 眼鏡呈現(xiàn)的內(nèi)容是全息 3D 立體的，交互采用“眼動+手勢”，那么現(xiàn)如今基于內(nèi)容呈現(xiàn)形式和交互方式這兩項構(gòu)建的互聯(lián)網(wǎng)基礎都發(fā)生改變后，用傳統(tǒng)的方法放在 AR/VR 眼鏡上是不適用的。

就比如“人機識別”，現(xiàn)如今的很多互聯(lián)網(wǎng)產(chǎn)品通過短信驗證碼、正確輸入難以理解的字母數(shù)字、拖拼圖等等，用這種方式來識別用戶是爬蟲機器人還是真人用戶，以此作為安全機制防止被薅羊毛。

但在 AR/VR 場景下可以有哪些人機識別機制呢？

圖源：蘋果官網(wǎng)

例如，要求用戶按照提示在空間中尋找正確的 3D 圖標，并通過眼動注視點看著 3D 圖標保持一定的時長。這是通過利用人對三維空間的意識理解和眼動交互實現(xiàn)的人機識別。

圖源：陳濤

再進一步，作為拖動滑塊拼圖的眼動升級版，如上圖中，系統(tǒng)隨機生成一個光球在空間中不規(guī)則的移動，然后用戶需要始終注視移動中的光球，直到光球到達終點。

這是通過人眼的追視行為和人眼無法憑空實現(xiàn)平滑移動的特性，以及光球在空間中深度（距離）發(fā)生變化時，人眼的視線夾角會產(chǎn)生變化等人類特有行為作為依據(jù)判斷是真人還是爬蟲機器人。除了上述提出的一些眼動人機識別方法，還有很多的眼動行為特性沒有被挖掘，甚至大伙有可能會想到更好的技術(shù)方案。

六、眼動追蹤與健康醫(yī)療、精神

圖源：陳濤

現(xiàn)在的智能手表基本功能重點在運動健康方面，比如心率、血氧、睡眠、壓力、體溫監(jiān)測等技術(shù)，都已經(jīng)比較成熟了，諸如蘋果、華為、小米等智能手表。

但是在未來基于 AR 眼鏡與眼動追蹤技術(shù)同樣具備健康檢測與精神檢測。目前在醫(yī)學界眼動追蹤技術(shù)是腦震蕩、自閉癥、小兒注意力缺陷等精神類病癥的重要依據(jù)，那么是否在未來 AR 眼鏡普及之后會誕生更多幫助改善注意力缺陷和自閉癥的醫(yī)學類 APP，這對于家長，以及一些特殊家庭的幫助是極大的。

基于 AR 眼鏡的眼動追蹤技術(shù)還可以做到腦異常、心臟異常、眼癌、高血壓等心腦血管類身體疾病檢查，因為可以通過眼動追蹤技術(shù)獲取眼睛的眼底圖像，眼底的特征包括眼睛的視網(wǎng)膜，視盤，黃斑，中央凹，眼底的一些病變和眼睛的健康情況，通過 AI 對所獲取的眼底圖像進行圖像分析是可以檢測出一些疾病的。

那么這對未來的智慧醫(yī)療的想象空間就很大了。

再者，業(yè)內(nèi)人士也知道 Magic Leap 在消費者市場遇到挫折后，更換的新 CEO Peggy Johnson 將戰(zhàn)略重心轉(zhuǎn)向商業(yè)場景，尤其是醫(yī)療領域。

圖源：Magic leap 專利 US10359631

筆者看了 Magic Leap 將眼動追蹤技術(shù)應用在醫(yī)療領域的相關專利文獻，在他們的專利號 10365488 描述中，AR 眼鏡加上眼動追蹤技術(shù)有可以能成為 “視力自動驗光儀”、“眼底鏡”、“裂隙燈”的眼科醫(yī)學的檢測設備，通過研究AR眼鏡的眼動和光學成像技術(shù)發(fā)現(xiàn)其硬件結(jié)構(gòu)就像微縮版視力自動驗光儀

試想一下未來如果真的 AR 眼鏡可以起到驗光儀的作用，那么對于現(xiàn)在的眼鏡店的變革也會很大，因為我們眼睛近視了，要去實體店通過驗光儀測算眼睛的度數(shù)，然后再制作出相應度數(shù)的眼鏡。但是如果眼睛近視度數(shù)在家就可以測算，將眼睛度數(shù)數(shù)據(jù)發(fā)送至后臺工廠，然后再將加工好的眼鏡寄送到客戶家里，這也可能隔了傳統(tǒng)眼鏡店的命，傳統(tǒng)實體眼鏡的未來也是未知之數(shù)。

上述分享了一部分在AR眼鏡上基于眼動追蹤的應用場景，有更多的更有價值的應用場景需要更多的小伙伴一起去挖掘。眼動追蹤將會是未來互聯(lián)網(wǎng)的重要組成元素之一，需要有更多的小伙伴投身其中才有機會變成現(xiàn)實。

PS：上述的所有應用場景都是基于AR眼鏡硬件已經(jīng)比較成熟的前提條件下。未來很美好，現(xiàn)實很殘酷。

行業(yè)專家評述：

七鑫易維創(chuàng)始人黃通兵：眼球追蹤在AR中的應用，我們已能看到的，就像冰山展現(xiàn)在水面之上的部分，而水面之下的部分更加龐大和壯觀，其神秘面紗正在等待廣大的創(chuàng)業(yè)者和開發(fā)者去慢慢揭開。

清華大學副教授何吉波：隨著AR/VR技術(shù)的發(fā)展和AR眼鏡的普及，眼動交互將成為未來的主要交互方式之一，眼動交互在醫(yī)療、教育、人機協(xié)作等領域的應用具備巨大市場價值。不僅如此，眼動交互在智能汽車、智能座艙、車載HUD場景中，眼動交互也是未來重要的研究方向。

成都虛實夢境CEO 吳瀾：作為國內(nèi)最早將XR技術(shù)應用于精神健康領域的公司，我們在精神疾病的評估，干預和訓練等環(huán)節(jié)，都引入了眼動技術(shù)。比如在注意力缺陷與多動障礙中（ADHD），眼動技術(shù)可以定量分析患者的注意力維持和注意力轉(zhuǎn)移；在自閉癥譜系障礙中（ASD），眼動可以很好地與共同凝視范式結(jié)合起來。