RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

眼動(dòng)追蹤讀取用戶微表情,用于新的交互方式

0wvm_ARchan_TT ? 來源:未知 ? 作者:胡薇 ? 2018-05-03 17:06 ? 次閱讀

眼動(dòng)追蹤一直都是VR和AR頭顯中比較受關(guān)注的技術(shù),這也應(yīng)該是大家比較熟悉的一個(gè)技術(shù)。頭戴顯示器的很多顯示效果都對(duì)眼動(dòng)追蹤技術(shù)有要求,比如建立在眼動(dòng)追蹤基礎(chǔ)上的中心渲染,既可以減小處理器渲染的計(jì)算量,也可以在某種程度上解決紗窗效應(yīng)問題。更近一步地說,眼動(dòng)追蹤同樣可以用于讀取用戶微表情,用于新的交互方式。

作為一個(gè)大家都知道它在悄悄研發(fā)AR頭顯的公司,蘋果的頭顯計(jì)劃中當(dāng)然也少不了眼動(dòng)追蹤方案,最近,蘋果的一份專利公開,展示了蘋果最近對(duì)于眼動(dòng)追蹤的研究。

在這次公布的專利中,并沒有特別說明頭顯的種類,也就是說,無論AR還是VR頭顯設(shè)備, 只要頭顯具備合適的支撐框架和鏡片,專利中說明的眼動(dòng)追蹤系統(tǒng)都是可以使用的。

蘋果的專利顯示,眼球跟蹤系統(tǒng)包括眼球跟蹤攝像頭 (如紅外線攝像頭),、照明源以及熱鏡。其中眼球跟蹤攝像頭位于用戶的臉側(cè), 并指向兩邊的鏡片, 照明源 (如近紅外光源)向用戶的眼睛發(fā)出近紅外光一類的光線, 而熱鏡位于鏡片和用戶的眼睛之間,接近鏡片表面的地方。

這個(gè)眼動(dòng)追蹤系統(tǒng)的原理可以解釋為:照明源發(fā)出的近紅外光照射用戶的眼睛,近紅外光從用戶的眼睛部分反射到熱鏡表面,而熱鏡是一種分色濾鏡,可以反射近紅外光, 同時(shí)允許可見光通過。熱鏡反射的近紅外光被用戶臉側(cè)的近紅外攝像機(jī)捕捉到,生成眼球位置的圖像,由此可以分析檢測(cè)用戶眼睛的位置和移動(dòng)。

其中,為了使眼睛跟蹤攝像頭可以接收到眼球位置的圖像, 可以采用兩種不同的相機(jī)位置。第一種就是前面提到的,將攝像頭放在臉側(cè),通過熱鏡的反射接收?qǐng)D像方案。第二種方案則是用攝像頭直接在鏡片的位置。由于第二種方案對(duì)用戶體驗(yàn)有妨礙,最終的方案選用了將攝像頭置于臉側(cè)的方案,因此,光傳播路線變得更加復(fù)雜。

文中所提到的熱鏡可以是鏡片,也可以由具有分光特性的涂層代替,后者可以直接涂在顯示鏡片的表面。而近紅外攝像機(jī)無論是在鼻側(cè)還是在臉外側(cè)都是可以的。

另外,專利中也提到了設(shè)計(jì)中眼球跟蹤系統(tǒng)提供的功能,最基礎(chǔ)的是可以用來跟蹤用戶眼睛的位置和移動(dòng);在進(jìn)一步的設(shè)計(jì)中, 眼睛跟蹤系統(tǒng)也可以用于跟蹤用戶的瞳孔膨脹,或其他特征。專利中已經(jīng)實(shí)現(xiàn)的功能有:通過眼睛注視點(diǎn)來進(jìn)行交互,在一個(gè)案例中,眼睛注視某一個(gè)選項(xiàng)一定時(shí)間后,系統(tǒng)會(huì)自動(dòng)選擇該選項(xiàng);此外,系統(tǒng)會(huì)根據(jù)瞳孔放大的情況自動(dòng)調(diào)整VR或AR圖像的亮度。

需要說明的是,這不是蘋果第一次提交眼動(dòng)追蹤系統(tǒng)的專利,早在16年,蘋果就提交過一份利用MEMS微機(jī)電系統(tǒng))控制的眼動(dòng)追蹤系統(tǒng)。這個(gè)系統(tǒng)主要包括一個(gè)追蹤攝像頭,一個(gè)MEMS設(shè)備和處理器。相機(jī)負(fù)責(zé)拍攝眼睛的圖像,而MEMS裝置控制相機(jī)的視角方向,處理器接收來自相機(jī)的眼睛的圖像,確定相機(jī)圖像內(nèi)的眼睛的位置,并控制MEMS以保持相機(jī)指向眼睛。在另一個(gè)案例中,MEMS裝置可以用來控制相機(jī)的可調(diào)焦距,處理器可以確定眼睛圖像的聚焦?fàn)顩r,控制MEMS設(shè)備以保持相機(jī)始終聚焦。

和之前的方案相比,最近通過的專利采用的方案不需要攝像頭的移動(dòng),同時(shí)不會(huì)影響用戶的視野,處理模塊的計(jì)算量更小,同時(shí)更加節(jié)能、高效。

就現(xiàn)有的幾份專利來看,最近公開的這個(gè)方案的優(yōu)越性可以說毋庸置疑。但由于蘋果對(duì)頭顯研發(fā)一貫的保密態(tài)度,我們也很難確定它的選擇,最終的結(jié)果可能還是需要等到2020年才能見分曉。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 眼動(dòng)追蹤
    +關(guān)注

    關(guān)注

    0

    文章

    18

    瀏覽量

    6742
  • ar頭顯
    +關(guān)注

    關(guān)注

    0

    文章

    67

    瀏覽量

    7592

原文標(biāo)題:蘋果眼動(dòng)追蹤專利公開

文章出處:【微信號(hào):ARchan_TT,微信公眾號(hào):AR醬】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    如何遠(yuǎn)離網(wǎng)絡(luò)追蹤

    分享如何避免被網(wǎng)絡(luò)追蹤。 ? 常見的網(wǎng)絡(luò)追蹤方式 1.IP 地址追蹤:每個(gè)設(shè)備在網(wǎng)絡(luò)上都會(huì)匹配唯一 IP 地址,通過該?IP 地址可以確定設(shè)備的大致物理位置及網(wǎng)絡(luò)服務(wù)提供商等信息,從而
    的頭像 發(fā)表于 09-03 16:57 ?386次閱讀
    如何遠(yuǎn)離網(wǎng)絡(luò)<b class='flag-5'>追蹤</b>

    用于顯示器的DLP技術(shù)

    電子發(fā)燒友網(wǎng)站提供《用于顯示器的DLP技術(shù).pdf》資料免費(fèi)下載
    發(fā)表于 08-29 14:48 ?0次下載
    <b class='flag-5'>用于</b>近<b class='flag-5'>眼</b>顯示器的DLP技術(shù)

    SynSense時(shí)識(shí)科技攜手蘇黎世聯(lián)邦理工發(fā)布Speck超低功耗動(dòng)追蹤應(yīng)用新突破

    近日,SynSense時(shí)識(shí)科技與蘇黎世聯(lián)邦理工學(xué)院聯(lián)合研究成果在2024 CVPR Workshop發(fā)布。該研究是—項(xiàng)基于“感算一體”動(dòng)態(tài)視覺智能SoC Speck的超低功耗動(dòng)追蹤技術(shù),結(jié)果顯示端到端系統(tǒng)功耗低至2.89mW,
    的頭像 發(fā)表于 08-06 18:02 ?1141次閱讀
    SynSense時(shí)識(shí)科技攜手蘇黎世聯(lián)邦理工發(fā)布Speck超低功耗<b class='flag-5'>眼</b><b class='flag-5'>動(dòng)</b><b class='flag-5'>追蹤</b>應(yīng)用新突破

    人機(jī)界面交互方式的介紹

    : 圖形用戶界面(Graphical User Interface, GUI) 圖形用戶界面是最常見的人機(jī)交互方式之一。它通過圖形元素(如圖標(biāo)、按鈕、菜單等)來實(shí)現(xiàn)
    的頭像 發(fā)表于 07-01 14:22 ?801次閱讀

    CS1237 中斷觸發(fā)讀取問題

    你好,求一份CS1237的外部中斷的51程序,目前我使用查詢方式讀取數(shù)據(jù)都是非常穩(wěn)定的。現(xiàn)在用中斷觸發(fā)方式,觸發(fā)后開啟標(biāo)志位并關(guān)閉外部中斷,等讀取數(shù)據(jù)完畢后再開啟外部中斷!使用按鍵,按
    發(fā)表于 06-27 01:56

    用于人機(jī)交互的頻率編碼動(dòng)追蹤智能隱形眼鏡

    近日,南京大學(xué)現(xiàn)代工程與應(yīng)用科學(xué)學(xué)院教授徐飛、陸延青,南京航空航天大學(xué)研究員陳燁團(tuán)隊(duì)同江蘇省人民醫(yī)院主任袁松濤團(tuán)隊(duì)提出了一種具有眼動(dòng)追蹤功能的隱形眼鏡。
    的頭像 發(fā)表于 05-22 09:11 ?481次閱讀
    <b class='flag-5'>用于</b>人機(jī)<b class='flag-5'>交互</b>的頻率編碼<b class='flag-5'>眼</b><b class='flag-5'>動(dòng)</b><b class='flag-5'>追蹤</b>智能隱形眼鏡

    未來的眼睛: 南京大學(xué)團(tuán)隊(duì)研發(fā)出動(dòng)追蹤隱形眼鏡

    近日,中國南京大學(xué)聯(lián)合江蘇省人民醫(yī)院、南京航空航天大學(xué)的研究團(tuán)隊(duì)研發(fā)出 一種具有眼動(dòng)追蹤功能的隱形眼鏡,外觀和普通隱形眼鏡無異
    的頭像 發(fā)表于 05-20 10:18 ?516次閱讀

    蘋果將推出動(dòng)追蹤輔助功能

    蘋果近日宣布,將在今年晚些時(shí)候?yàn)閕Pad和iPhone用戶推出一項(xiàng)革命性的輔助功能——動(dòng)追蹤。這一功能旨在幫助身體殘疾的用戶通過眼睛輕松控
    的頭像 發(fā)表于 05-17 10:04 ?536次閱讀

    人機(jī)交互的三個(gè)階段 人機(jī)交互的常用方式

    機(jī)交互經(jīng)歷的三個(gè)階段:命令行界面交互階段、圖形用戶界面交互階段、自然和諧的人機(jī)交互階段。
    的頭像 發(fā)表于 03-13 17:25 ?3027次閱讀

    ESP32動(dòng)追蹤設(shè)計(jì)實(shí)現(xiàn)-EyeTrackVR

    動(dòng)應(yīng)用其實(shí)實(shí)現(xiàn)的主要功能是:實(shí)時(shí)注視估計(jì)和跟蹤。注視估計(jì)是識(shí)別任何給定時(shí)刻的視線,而跟蹤是連續(xù)跟隨視線的能力。
    的頭像 發(fā)表于 03-07 11:02 ?1641次閱讀
    ESP32<b class='flag-5'>眼</b><b class='flag-5'>動(dòng)</b><b class='flag-5'>追蹤</b>設(shè)計(jì)實(shí)現(xiàn)-EyeTrackVR

    Meta技術(shù)官解析:Quest 3為何未集成動(dòng)追蹤技術(shù)

    蘋果剛發(fā)布的Vision Pro也不例外,其內(nèi)部設(shè)有四個(gè)動(dòng)追蹤相機(jī),以此來增強(qiáng)用戶體驗(yàn)感。IT之家觀察發(fā)現(xiàn),盡管Meta于2022年推出的Quest Pro裝備有眼
    的頭像 發(fā)表于 02-19 10:04 ?712次閱讀

    鴻蒙開發(fā)丨設(shè)備內(nèi) UIAbility 的幾種交互方式

    UIAbility 組件間交互(設(shè)備內(nèi)) 在設(shè)備內(nèi),UIAbility(用戶界面能力)是系統(tǒng)調(diào)度的最小單元,它們負(fù)責(zé)展示用戶界面和執(zhí)行相關(guān)的業(yè)務(wù)邏輯。設(shè)備內(nèi)的不同功能模塊之間的交互是應(yīng)
    的頭像 發(fā)表于 02-02 10:42 ?607次閱讀
    鴻蒙開發(fā)丨設(shè)備內(nèi) UIAbility 的幾種<b class='flag-5'>交互</b><b class='flag-5'>方式</b>

    人機(jī)交互技術(shù)有哪幾種 人機(jī)交互技術(shù)的發(fā)展趨勢(shì)

    的幾種形式: 圖形用戶界面(GUI):圖形用戶界面是目前最為常見的人機(jī)交互技術(shù)形式。它通過圖形化的方式展示信息,用戶可通過鼠標(biāo)、鍵盤等設(shè)備進(jìn)
    的頭像 發(fā)表于 01-22 17:47 ?3583次閱讀

    微軟AR/VR專利提出任意給定方向&lt;100 μm紅外MicroLED照明透鏡結(jié)構(gòu)

    用于XR頭顯的動(dòng)追蹤技術(shù)正在迅速發(fā)展。追蹤動(dòng)和確
    的頭像 發(fā)表于 01-17 11:25 ?725次閱讀
    微軟AR/VR專利提出任意給定方向&lt;100 μm紅外MicroLED照明透鏡結(jié)構(gòu)

    語音識(shí)別技術(shù)最新進(jìn)展:視聽融合的多模態(tài)交互成為主要演進(jìn)方向

    多種模態(tài)(聲學(xué)、語言模型、視覺特征等)進(jìn)行聯(lián)合建模,基于深度學(xué)習(xí)的多模態(tài)語音識(shí)別取得了新進(jìn)展。 ? 多模態(tài)交互的原理及優(yōu)勢(shì) ? 多模態(tài)交互技術(shù)融合了多種輸入方式,包括語音、手勢(shì)、觸摸和
    的頭像 發(fā)表于 12-28 09:06 ?3837次閱讀
    語音識(shí)別技術(shù)最新進(jìn)展:視聽融合的多模態(tài)<b class='flag-5'>交互</b>成為主要演進(jìn)方向
    RM新时代网站-首页