RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

視覺(jué)驅(qū)動(dòng)超構(gòu)表面在感知增強(qiáng)中的應(yīng)用

MEMS ? 來(lái)源:MEMS ? 2024-03-11 11:12 ? 次閱讀

超構(gòu)表面(metasurface)在調(diào)控電磁(EM)波方面表現(xiàn)出前所未有的自由度,從而為智能系統(tǒng)提供了出色的前端接口。

據(jù)麥姆斯咨詢報(bào)道,近日,第四軍醫(yī)大學(xué)、中國(guó)人民解放軍空軍工程大學(xué)、東南大學(xué)、蘇州國(guó)家實(shí)驗(yàn)室航空航天超構(gòu)材料實(shí)驗(yàn)室、新加坡國(guó)立大學(xué)(National University of Singapore)、北京理工大學(xué)、西安交通大學(xué)第一附屬醫(yī)院的研究人員組成的團(tuán)隊(duì)在Nature Communications期刊上發(fā)表了題為“Vision-driven metasurfaces for perception enhancement”的論文,提出了一種基于視覺(jué)驅(qū)動(dòng)超構(gòu)表面的感知增強(qiáng)架構(gòu)。人類(lèi)的眼球運(yùn)動(dòng)與微波輻射相匹配,從而擴(kuò)展了人類(lèi)的感知譜。通過(guò)這種方式,人們的眼睛可以“感知”視覺(jué)信息和不可見(jiàn)的微波信息。

上述科研團(tuán)隊(duì)給出了一些具體實(shí)施的實(shí)驗(yàn)演示,包括生理信號(hào)監(jiān)測(cè)系統(tǒng)、“X射線眼鏡”系統(tǒng)、“一瞥即忘”追蹤系統(tǒng)和聾人語(yǔ)音接收系統(tǒng)。模擬和實(shí)驗(yàn)結(jié)果均驗(yàn)證了其在感知增強(qiáng)效果和提高信息獲取效率方面具有明顯的優(yōu)勢(shì)。該架構(gòu)可輕松集成到醫(yī)療保健系統(tǒng)中,用于監(jiān)測(cè)生理信號(hào)并為殘疾人士提供幫助。這項(xiàng)工作為感知增強(qiáng)提供了一種替代架構(gòu),并有望在醫(yī)療保健、可穿戴設(shè)備、搜索和救援等領(lǐng)域得到廣泛應(yīng)用。

感知增強(qiáng)系統(tǒng)的架構(gòu)

研究人員通過(guò)多種手段的組合提出了一種智能超構(gòu)表面系統(tǒng)架構(gòu),如圖1a所示。眼球追蹤眼鏡是一種可穿戴解決方案,用于捕獲認(rèn)知負(fù)荷和觀看行為的客觀測(cè)量數(shù)據(jù),非常適合以所需的空間和時(shí)間分辨率提供可靠的眼球運(yùn)動(dòng)數(shù)據(jù)。當(dāng)用戶佩戴眼球追蹤器并運(yùn)行程序時(shí),可以提取相關(guān)的眼球運(yùn)動(dòng)數(shù)據(jù),包括凝視點(diǎn)、眼球掃視、眨眼等。在此基礎(chǔ)上,利用數(shù)據(jù)處理程序可對(duì)眼球運(yùn)動(dòng)原始數(shù)據(jù)進(jìn)行處理。通過(guò)對(duì)感興趣區(qū)域(AOI)和受試者狀態(tài)(例如注意力)的分析,識(shí)別出需要追蹤或感知增強(qiáng)的區(qū)域,從而為可編程超構(gòu)表面的調(diào)控奠定了基礎(chǔ)。

可編程超構(gòu)表面伴隨著數(shù)字編碼特征,其中電磁響應(yīng)由數(shù)字編碼序列調(diào)控。借助現(xiàn)場(chǎng)可編程門(mén)陣列(FPGA)和數(shù)模轉(zhuǎn)換(DAC)模塊,當(dāng)施加在二極管上的電壓變化時(shí),數(shù)字編碼序列也會(huì)相應(yīng)改變,從而調(diào)整輻射角度。因此,根據(jù)AOI和受試者的狀態(tài),算法可以自行確定超構(gòu)表面的反應(yīng),并指示FPGA改變可編程超構(gòu)表面配置,然后確定數(shù)字編碼序列。通過(guò)這種方式,研究人員可以調(diào)整可編程超構(gòu)表面的不同功能,以實(shí)現(xiàn)良好的定向輻射波束形狀和其它智能功能。此外,通過(guò)透明介質(zhì)襯底和金屬網(wǎng)格模式,所提出的超構(gòu)表面結(jié)構(gòu)可以實(shí)現(xiàn)較高的可見(jiàn)光透射率。它使超構(gòu)表面能夠集成多個(gè)頻段的信息,以及實(shí)現(xiàn)眼睛(可見(jiàn)光)和超構(gòu)表面(微波)的整合。

眼球運(yùn)動(dòng)的自主光束調(diào)控

研究人員提出了一種基于眼球運(yùn)動(dòng)的輻射波束調(diào)控方案,即使用眼球追蹤器使照射電磁波的方向隨著眼球運(yùn)動(dòng)而變化。這種方法實(shí)現(xiàn)了自主、靈活的波束調(diào)控,為微波探測(cè)奠定了基礎(chǔ)。

在這項(xiàng)研究工作中,研究人員設(shè)計(jì)了一種輻射型可編程超構(gòu)表面。設(shè)計(jì)的超構(gòu)表面由16 × 16個(gè)單元構(gòu)成,總面積為240 mm × 240 mm。

96310314-de34-11ee-a297-92fbcf53809c.jpg
圖1 基于視覺(jué)驅(qū)動(dòng)的超構(gòu)表面及其電磁特性的感知增強(qiáng)系統(tǒng)

為了全面掌握單元的輻射光譜,研究人員使用CST Microwave Studio模擬了單元在正電壓和負(fù)電壓下的輻射相位,如圖1b所示。圖1c-1g展示了使用不同編碼序列在代表性掃描角度下的實(shí)驗(yàn)遠(yuǎn)場(chǎng)輻射圖。從上述圖中可以觀察到,形狀良好的定向輻射波束以非常高的指向穩(wěn)定性被激發(fā),并且超構(gòu)表面具有將電磁輻射擴(kuò)展到二維空間的能力。

接下來(lái),研究人員將眼球運(yùn)動(dòng)過(guò)程與超構(gòu)表面相結(jié)合,實(shí)現(xiàn)自主電磁波束調(diào)控。在實(shí)驗(yàn)中,他們研究了眼球在一段時(shí)間內(nèi)注視不同位置的目標(biāo)的場(chǎng)景。

96465552-de34-11ee-a297-92fbcf53809c.jpg
圖2 不同編碼模式下的凝視點(diǎn)、眼球圖像和測(cè)得的超構(gòu)表面遠(yuǎn)場(chǎng)輻射光譜

實(shí)驗(yàn)結(jié)果如圖2所示,圖中說(shuō)明了上半部分空間中的凝視點(diǎn)和眼球圖像與下半部分空間的遠(yuǎn)場(chǎng)散射模式測(cè)量值之間的關(guān)系。圖2a-2e分別對(duì)應(yīng)于圖1c-1g。利用這種調(diào)控方法,研究人員成功地將視場(chǎng)與超構(gòu)表面微波輻射結(jié)合起來(lái),彌補(bǔ)了視覺(jué)感知的局限性,為微波探測(cè)奠定了基礎(chǔ)。

“X射線眼鏡”:可視多目標(biāo)呼吸、心跳檢測(cè)

為了提高人類(lèi)的感知能力,研究人員提出了一種高效、智能的感知增強(qiáng)途徑——X射線眼鏡,其通過(guò)超構(gòu)表面將視覺(jué)信息與人體生理信息關(guān)聯(lián)起來(lái)。該實(shí)驗(yàn)是對(duì)自由空間中多個(gè)人類(lèi)目標(biāo)的呼吸和心跳信號(hào)進(jìn)行檢測(cè)。觀察者不僅感知到目標(biāo)的視覺(jué)圖像,還能感知到其不可見(jiàn)的生理信號(hào),例如呼吸和心跳。

965b39cc-de34-11ee-a297-92fbcf53809c.jpg
圖3 兩位坐在(-28°,28°)位置的受試者的呼吸和心跳信號(hào)檢測(cè)

兩名受試者的呼吸和心跳檢測(cè)實(shí)驗(yàn)結(jié)果如圖3所示。實(shí)驗(yàn)結(jié)果表明,兩名受試者的呼吸和心跳周期與參考信號(hào)匹配良好。此外,通過(guò)眼球運(yùn)動(dòng)改變電磁波的方向,可以在物理層面上很好地分離不同方位角的不同受試者的呼吸和心跳信號(hào)。

“X射線眼鏡”:木板障礙物后面的人體位置和運(yùn)動(dòng)檢測(cè)

該實(shí)驗(yàn)是對(duì)障礙物后面的人類(lèi)受試者進(jìn)行位置和運(yùn)動(dòng)檢測(cè)。該方法不僅可以檢測(cè)隱藏人員的準(zhǔn)確方位,還可以檢測(cè)其運(yùn)動(dòng)模式。

如圖4a-4c所示,在方位角28°處檢測(cè)到了明顯的呼吸信號(hào),這表明該方向存在人類(lèi)受試者。實(shí)驗(yàn)結(jié)果表明,超構(gòu)表面測(cè)量到的呼吸信號(hào)與使用接觸式呼吸帶獲得的呼吸信號(hào)高度吻合。另外兩個(gè)方位角則沒(méi)有檢測(cè)到呼吸,這與實(shí)際的實(shí)驗(yàn)設(shè)置相符。圖4d-4f顯示在所有三個(gè)方向上均檢測(cè)到呼吸信號(hào),這意味著在所有三個(gè)方向上都能定位人類(lèi)受試者。上述結(jié)果驗(yàn)證了人體位置檢測(cè)方法的有效性。

研究人員以方位角為28°的人類(lèi)目標(biāo)為例,驗(yàn)證其運(yùn)動(dòng)檢測(cè)性能。圖4g–4j顯示了所獲得的四種平板后人體運(yùn)動(dòng)的微多普勒特征。

與呼吸檢測(cè)一樣,當(dāng)檢測(cè)特定方位角的人類(lèi)運(yùn)動(dòng)時(shí),超構(gòu)表面發(fā)射的窄波束可以排除來(lái)自檢測(cè)空間中其他位置的干擾,這使其能夠在多個(gè)人類(lèi)目標(biāo)(運(yùn)動(dòng)中)共存的真實(shí)檢測(cè)場(chǎng)景中魯棒地運(yùn)行。通過(guò)這種方式,人體的位置和運(yùn)動(dòng)可以在觀察者無(wú)法直接看到的情況下進(jìn)行檢測(cè),即觀察者擁有一副X射線眼鏡。

966aaba0-de34-11ee-a297-92fbcf53809c.jpg
圖4 平板障礙物后人類(lèi)受試者的位置和運(yùn)動(dòng)檢測(cè)

最后,研究人員還演示了“一瞥即忘”超構(gòu)表面智能目標(biāo)追蹤系統(tǒng)、聾人無(wú)障礙語(yǔ)音采集和增強(qiáng)系統(tǒng)。

綜上所述,這項(xiàng)研究提出了基于視覺(jué)驅(qū)動(dòng)的超構(gòu)表面概念,并在此基礎(chǔ)上提出了一種感知增強(qiáng)的架構(gòu)。通過(guò)將眼球追蹤器和可編程超構(gòu)表面相結(jié)合,建立了一種從受試者意識(shí)到超構(gòu)表面模式的新型調(diào)控方式。研究人員提出了一種用于調(diào)整輻射光束的智能超構(gòu)表面以闡明上述概念。所提出的智能超構(gòu)表面平臺(tái)嵌入了人類(lèi)視覺(jué)感知,能夠有效地響應(yīng)不斷變化的AOI和受試者狀態(tài)。在此基礎(chǔ)上,研究人員演示了具有不同功能的典型方案,包括生理指標(biāo)監(jiān)測(cè)系統(tǒng)、X射線眼鏡系統(tǒng)、“一瞥即忘”追蹤系統(tǒng)和面向聾人的醫(yī)療保健系統(tǒng)。

與傳統(tǒng)方法相比,該平臺(tái)融合了信號(hào)處理、計(jì)算機(jī)視覺(jué)、電磁等技術(shù)手段。智能平臺(tái)引入超構(gòu)表面使人類(lèi)具有更強(qiáng)的信息獲取、處理和感知能力。對(duì)光學(xué)、微波等多波段信息的感知彌補(bǔ)了人類(lèi)視覺(jué)在被遮擋情況下的不足。該方法可以幫助人類(lèi)識(shí)別感興趣的目標(biāo)并輔助目標(biāo)追蹤。此外,通過(guò)利用人類(lèi)的視覺(jué)感知和判斷能力,所提出的方法使超構(gòu)表面及其智能平臺(tái)具有更多的自由度和更先進(jìn)的功能,為超構(gòu)表面提供了新的定義,并為認(rèn)知和智能超構(gòu)表面的實(shí)現(xiàn)奠定了基礎(chǔ)。

審核編輯:黃飛


聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • FPGA
    +關(guān)注

    關(guān)注

    1629

    文章

    21729

    瀏覽量

    602984
  • 光譜
    +關(guān)注

    關(guān)注

    4

    文章

    818

    瀏覽量

    35151
  • 波束
    +關(guān)注

    關(guān)注

    0

    文章

    54

    瀏覽量

    15758
  • 計(jì)算機(jī)視覺(jué)

    關(guān)注

    8

    文章

    1698

    瀏覽量

    45974
  • 微波輻射
    +關(guān)注

    關(guān)注

    0

    文章

    6

    瀏覽量

    6725

原文標(biāo)題:用于感知增強(qiáng)的視覺(jué)驅(qū)動(dòng)超構(gòu)表面

文章出處:【微信號(hào):MEMSensor,微信公眾號(hào):MEMS】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    COMSOL Multiphysics材料與表面仿真中的應(yīng)用

    作為一款強(qiáng)大的多物理場(chǎng)仿真軟件,為材料和表面的研究提供了強(qiáng)大的仿真工具。本文將重點(diǎn)介紹COMSOL Multiphysics周期性
    發(fā)表于 02-20 09:20

    湖北機(jī)器視覺(jué)紙張表面瑕疵檢測(cè)的作用

    紙張表面,配合四元數(shù)數(shù)控的機(jī)器視覺(jué)檢測(cè)系統(tǒng),快速識(shí)別缺陷,自動(dòng)分類(lèi)缺陷, 并提醒和標(biāo)記缺陷,實(shí)現(xiàn)100%紙張缺陷檢測(cè),大大提高生產(chǎn)效率。機(jī)器視覺(jué)
    發(fā)表于 07-12 10:24

    簡(jiǎn)述關(guān)于構(gòu)表面量子光學(xué)的應(yīng)用

    | 摘要 近年來(lái),利用構(gòu)表面對(duì)光場(chǎng)的調(diào)控研究取得了令人矚目的進(jìn)展,不僅在經(jīng)典光的調(diào)控方面取得了優(yōu)異的成果,量子光學(xué)方面的研究和應(yīng)用也開(kāi)始嶄露頭角,引起人們?cè)絹?lái)越多的研究興趣。文章簡(jiǎn)
    的頭像 發(fā)表于 06-11 15:11 ?4571次閱讀

    消色差構(gòu)表面復(fù)合透鏡近紅外波段的消色差效果

    傳統(tǒng)光學(xué)器件因體積笨重等缺點(diǎn)無(wú)法滿足現(xiàn)代光學(xué)設(shè)備對(duì)光學(xué)系統(tǒng)集成化的要求,隨著構(gòu)表面的迅速發(fā)展,新一代微型光學(xué)系統(tǒng)的出現(xiàn)成為可能。構(gòu)
    的頭像 發(fā)表于 08-12 10:31 ?2203次閱讀

    鈮酸鋰構(gòu)表面制備及光子學(xué)應(yīng)用

    作為三維構(gòu)材料的衍生物,具有亞波長(zhǎng)厚度的人工構(gòu)表面結(jié)構(gòu)能夠緊湊的平臺(tái)上靈活操縱光與物質(zhì)的相
    的頭像 發(fā)表于 01-14 17:27 ?3603次閱讀

    一種基于C形開(kāi)口環(huán)諧振器的相位不連續(xù)構(gòu)表面

    有源構(gòu)表面(active metasurface)以其可調(diào)諧的光學(xué)響應(yīng)和平坦緊湊的形貌,正在成為下一代光學(xué)器件的核心。
    的頭像 發(fā)表于 01-16 11:01 ?1831次閱讀

    面向偏振成像的構(gòu)表面器件功能原理和未來(lái)趨勢(shì)

    早期的構(gòu)表面采用金或銀等金屬材料作為其結(jié)構(gòu)材料,這是因?yàn)樗鼈兙哂懈叩碾娮用芏群碗妼?dǎo)率,使其紅外或微波波段具有良好的性能表現(xiàn)。
    的頭像 發(fā)表于 03-08 11:25 ?2145次閱讀

    一種基于硅的熱光效應(yīng)與閃加熱驅(qū)動(dòng)的電可調(diào)構(gòu)表面

    構(gòu)表面因其優(yōu)異的光散射特性而備受研究者的關(guān)注。然而,固有的靜態(tài)幾何形狀限制了構(gòu)表面對(duì)動(dòng)態(tài)可調(diào)
    的頭像 發(fā)表于 03-09 18:06 ?1244次閱讀

    淺析構(gòu)表面用于激光光纖腔內(nèi)時(shí)空調(diào)控

    構(gòu)表面(Metasurfaces)調(diào)控光的振幅、相位或偏振方面具有很高的通用性。
    的頭像 發(fā)表于 03-20 09:48 ?1096次閱讀

    介質(zhì)構(gòu)表面的CMOS兼容制備工藝的進(jìn)展

    構(gòu)表面為納米光子器件賦予了更高的自由度與靈活度,使實(shí)用的微納米光子器件的實(shí)現(xiàn)成為可能。
    的頭像 發(fā)表于 07-27 09:39 ?1545次閱讀
    介質(zhì)<b class='flag-5'>超</b><b class='flag-5'>構(gòu)</b><b class='flag-5'>表面</b>的CMOS兼容制備工藝的進(jìn)展

    非線性光學(xué)構(gòu)表面的基礎(chǔ)知識(shí)與應(yīng)用概述

    光學(xué)構(gòu)表面是一種由亞波長(zhǎng)尺度的構(gòu)單元面內(nèi)排布而構(gòu)成的準(zhǔn)二維人工結(jié)構(gòu)材料。
    的頭像 發(fā)表于 08-14 14:34 ?2912次閱讀
    非線性光學(xué)<b class='flag-5'>超</b><b class='flag-5'>構(gòu)</b><b class='flag-5'>表面</b>的基礎(chǔ)知識(shí)與應(yīng)用概述

    構(gòu)表面微測(cè)輻射熱計(jì)的應(yīng)用綜述

    構(gòu)表面突破了傳統(tǒng)自然材料的電磁特性限制,同時(shí)也解決了三維材料難以加工實(shí)現(xiàn)等瓶頸問(wèn)題,使器件朝著集成化,小型化,低成本,可調(diào)諧的方向不斷發(fā)展。
    的頭像 發(fā)表于 02-25 09:16 ?714次閱讀
    <b class='flag-5'>超</b><b class='flag-5'>構(gòu)</b><b class='flag-5'>表面</b><b class='flag-5'>在</b>微測(cè)輻射熱計(jì)<b class='flag-5'>中</b>的應(yīng)用綜述

    探討三種構(gòu)器件表面的加工方法

    構(gòu)表面是近年來(lái)出現(xiàn)一種新型的光學(xué)器件,也被稱為構(gòu)器件。
    的頭像 發(fā)表于 03-19 15:23 ?702次閱讀
    探討三種<b class='flag-5'>超</b><b class='flag-5'>構(gòu)</b>器件<b class='flag-5'>表面</b>的加工方法

    基于納米壓印構(gòu)透鏡陣列的增強(qiáng)現(xiàn)實(shí)方案

    研究人員基于超薄納米壓印構(gòu)透鏡陣列開(kāi)發(fā)出一種透視增強(qiáng)現(xiàn)實(shí)(AR)原型,開(kāi)創(chuàng)了一種全彩、視頻速率和低成本的3D近眼顯示方案。
    的頭像 發(fā)表于 05-15 09:09 ?1399次閱讀
    基于納米壓印<b class='flag-5'>超</b><b class='flag-5'>構(gòu)</b>透鏡陣列的<b class='flag-5'>增強(qiáng)</b>現(xiàn)實(shí)方案

    基于相變材料的可重構(gòu)構(gòu)表面用于圖像處理

    光學(xué)構(gòu)表面(metasurface)實(shí)現(xiàn)了亞波長(zhǎng)尺度內(nèi)的模擬計(jì)算和圖像處理,并具備更低的功耗、更快的速度。雖然人們已經(jīng)展示了各種圖像處理
    的頭像 發(fā)表于 11-13 10:24 ?218次閱讀
    基于相變材料的可重構(gòu)<b class='flag-5'>超</b><b class='flag-5'>構(gòu)</b><b class='flag-5'>表面</b>用于圖像處理
    RM新时代网站-首页