RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于局部表面特征的三維物體識別方法的研究現(xiàn)狀

新機器視覺 ? 來源:3D視覺工坊 ? 作者:3D視覺工坊 ? 2021-04-18 10:52 ? 次閱讀

摘要:在雜亂場景中進行三維目標識別是一個迅速發(fā)展的研究領(lǐng)域。根據(jù)使用的特征類型,三維物體識別方法大致可分為兩類:基于全局特征的方法和基于局部特征的方法。密集的基于局部地物特征的方法對遮擋和雜波有較強的魯棒性經(jīng)常出現(xiàn)在現(xiàn)實世界的場景中。本文對現(xiàn)有的局部地物進行了綜合研究三維物體識別方法。這些方法一般包括三個階段:三維關(guān)鍵點檢測、局部表面特征描述和表面匹配。

一 引言

在雜亂的場景中,物體識別是在計算機視覺研究領(lǐng)域的一個基礎(chǔ)。它有很多應用,比如智能監(jiān)控,自動裝配,遙感,移動操作,機器人,生物特征分析和醫(yī)學治療。在過去的幾十年中,二維物體識別得到了廣泛的應用,目前比較成熟的研究區(qū)域[1]。與二維圖像相比,距離圖像都顯示出了對象識別的幾個優(yōu)點。例如,(i)和2D圖像相比,距離圖像提供更多的幾何信息。距離圖像也編碼表面度量尺寸比較明確。(ii)距離圖像通常不受尺度的影響,旋轉(zhuǎn)和照明。(iii) 與二維圖像估計的姿勢相比,估計3D距離圖像中的物體姿態(tài)更準確。因此,距離圖像有可能被克服二維圖像所面臨的許多困難在于對象識別[2]。這些優(yōu)勢使三維物體識別成為一個活躍的研究課題。而且,技術(shù)迅速發(fā)展并且成本較低的3D采集系統(tǒng)(如微軟Kinect)使得距離圖像更容易獲取。此外,設(shè)備的進步使之成為任何計算密集型的處理三維物體識別算法在一個比較公平的并可接受的方式。所有這些因素的共同作用,促成了研究的三維物體識別系統(tǒng)的發(fā)展。 現(xiàn)有的三維物體識別方法可以進行劃分為兩大類:基于全局特征的方法和基于局部特征的方法。基于全局特征的方法處理對象作為一個整體來獲得認可。它們定義了一組全局的特征,有效和簡潔地描述完整的3D對象(或模型)。這些方法在三維形狀檢索中得到了廣泛的應用分類。這個類別的例子包括幾何三維矩形,形狀分布、點特征直方圖[3]、空間嵌入。然而,它們忽視形狀細節(jié),需要先從場景中分割對象。因此不適合識別部分可見的從混亂的場景中對象。另一方面,基于局部特征的方法只提取局部特征特定關(guān)鍵點周圍的表面。它們通常用基于全局特征的方法來處理遮擋和雜波較好,這種類型也有在2D領(lǐng)域的表現(xiàn)明顯更好進行對象識別。這一結(jié)論也是擴展到3D物體識別領(lǐng)域。在此基礎(chǔ)上,本文重點研究了三維物體識別在有局部地表特征的雜亂場景中。

二 相關(guān)工作

范圍圖像可以表示為三種類型,即深度圖像、點云或多邊形網(wǎng)。給定一幅距離圖像,即三維對象的目標識別就是正確地識別事物中存在的物體范圍成像,并確定他們的姿勢,在概念層次上,基于典型的局部特征三維物體識別系統(tǒng)主要由三個部分組成階段:三維關(guān)鍵點檢測,局部表面特征描述和表面匹配。在3D關(guān)鍵點檢測階段,三維點具有豐富的信息內(nèi)容被確定為關(guān)鍵點。固有的規(guī)模對每個關(guān)鍵點也進行檢測。這兩個位置和一個關(guān)鍵點的尺度(即鄰里大小)定義后續(xù)使用的局部表面,在局部表面特征描述階段,對關(guān)鍵點的鄰域曲面的幾何信息進行編碼變成一個代表性的特征描述符。在表面匹配相位,對場景特征進行匹配針對庫中的所有模型特性,導致一組特征對應和假設(shè)。這些假設(shè)最終被驗證以推斷身份和物體的姿態(tài)。

三 3D關(guān)鍵點檢測

關(guān)鍵點檢測是基于局部坐標的三維目標識別系統(tǒng)的第一個主要階段。最簡單的關(guān)鍵點檢測方法是表面稀疏采樣和網(wǎng)格抽取。然而,這些方法在可重復性和信息性方面并沒有產(chǎn)生合格的關(guān)鍵點。這是因為它們沒有或很少考慮到這些檢測到的關(guān)鍵的判別信息的豐富性。因此,有必要根據(jù)關(guān)鍵點的特殊性對其進行檢測。根據(jù)尺度來判斷是否自適應檢測,關(guān)鍵點檢測方法可以分為固定尺度關(guān)鍵點檢測方法和自適應尺度關(guān)鍵點檢測方法。

3.1 固定尺寸關(guān)鍵點的檢測

固定尺度關(guān)鍵點檢測方法定義一個在預定鄰域內(nèi)具有特征的點作為關(guān)鍵點。鄰域大小由尺度決定,尺度是算法的輸入參數(shù)

3.1.1 基于曲率的方法

Mokhtarian等人使用高斯和平均曲率檢測關(guān)鍵點。如果一個點p的曲率值大于它的內(nèi)環(huán)鄰域的曲率值,那么這個點p就是一個關(guān)鍵點。Yamany和Farag使用單純形角來檢測關(guān)鍵點。單形角φ與平均曲率有關(guān)。在單形角滿足約束|sin(φ)|τ的位置檢測到關(guān)鍵點。它們的閾值τ對于關(guān)鍵點檢測的性能是至關(guān)重要的,選擇一個合適的閾值仍然是一個未解決的問題。Gal和Cohen-Or提出了關(guān)鍵點檢測的顯著性等級。p點的顯著性等級是兩項的線性組合,項是相鄰點曲率的和,第二項是相鄰點曲率值的方差。選取顯著性等級高的點作為重點。Chen和Bhanu基于形狀指標值檢測關(guān)鍵點。也就是說,在一個鄰域內(nèi),點p只有在其形狀索引值為局部最優(yōu)(最大值/最小值)時才被標記為關(guān)鍵點。實驗結(jié)果表明,檢測到的關(guān)鍵點分布均勻在[33]表面。然而,這種方法對噪聲很敏感。

3.1.2 基于 (OSV)方法

Matei等人使用相鄰點協(xié)方差矩陣的最小特征值λ3來測量點p周圍的表面變化。根據(jù)點的表面變化對點進行排序。本文使用兩個連續(xù)特征值的比率來修剪點。Glomb提出了四個命題,將流行的Harris檢測器從2D圖像擴展到3D網(wǎng)格。他們發(fā)現(xiàn)哈里斯探測器利用擬合二次曲面的導數(shù),達到了最好的效果。這一命題,siiran和Busto提出了一種“哈里斯3D”探測器。給定一個點p,相鄰的點優(yōu)先平移到質(zhì)心,然后旋轉(zhuǎn)以對齊垂直于p和z軸。

3.2 自適應尺度關(guān)鍵點檢測

自適應尺度關(guān)鍵點檢測方法首先對給定的距離圖像建立尺度空間。然后,他們在空間和尺度上選取具有極端特殊性的點作為關(guān)鍵點。結(jié)果,檢測出了關(guān)鍵點的位置和尺度。根據(jù)尺度空間構(gòu)建技術(shù),這些方法可以分為四類:坐標平滑法、幾何屬性平滑法、表面變化法和基于變換的方法。

3.2.1 基于坐標平滑的方法

這些方法是通過平滑距離圖像的3D坐標連續(xù)地構(gòu)造一個尺度空間,以二維尺度空間理論為基礎(chǔ)的。 Uluoy通過構(gòu)造曲面的高斯金字塔得到了三維曲面的尺度空間。然后他們計算了平均值和所有點在所有尺度上的高斯曲率值,并根據(jù)每個點的高斯曲率和平均曲率將其分類為八種曲面類型之一。在分類的尺度空間中,每個具有相同表面類型的連接體都被檢測到。連接體的中心被選擇為一個關(guān)鍵點的位置。

3.2.2 基于幾何屬性平滑(GAS)方法

這些方法通過連續(xù)平滑距離圖像的幾何屬性來構(gòu)造尺度空間。由于濾波是應用于幾何屬性而不是距離圖像本身,沒有對三維形狀的外部幾何進行修改。因此,保持了尺度空間的因果關(guān)系屬性。

3.2.3 基于表面變化(SV)方法

這些方法首先計算一組不同鄰域大小的曲面變化。然后,他們通過尋找不同鄰域大小的局部鄰域表面變化的最大值來檢測關(guān)鍵點。它們是基于假設(shè)鄰域大小可以看作是一個離散尺度參數(shù),增加局部鄰域大小類似于應用平滑濾波器。這些方法避免了對3D表面的直接更改,而且它們很容易實現(xiàn)。

be8a3070-9fbb-11eb-8b86-12bb97331649.png

圖1 在龍模型上檢測到關(guān)鍵點 (a)通過[4]檢測到的關(guān)鍵點。不同大小的球體對應著不同尺度的關(guān)鍵點。 (b)(c)(d)通過[5]在3個尺度上檢測到的關(guān)鍵點及其鄰域。每個彩色的小塊對應著一個關(guān)鍵點的附近,藍色球體的大小對應著尺度。 Ho和Gibbins[4]使用的是標準偏差鄰點的形狀索引值來測量地表變化。檢測到的要點在圖中對龍模型進行了說明。圖1(a)表明了該方法的有效性對小噪聲有效且魯棒。它實現(xiàn)了高重復性的結(jié)果,即使有噪聲表面。后來,Ho和Gibbin估算了曲線度在不同的尺度上,選擇極端的點尺度空間中的值作為關(guān)鍵點。同樣的,Ioanou等提出了對較大的字符進行分割的DoN (Normals)操作符無組織的3D點云。DoN操作員提供點數(shù)的大幅減少,從而減少任何后續(xù)處理的計算成本場景的階段(當處理在分割的部分)。犰狳上發(fā)現(xiàn)的關(guān)鍵點的插圖模型如圖2所示。實驗結(jié)果顯示這些關(guān)鍵點對于剛性變換,等距變形和不同的網(wǎng)格三角法。如圖3所示,它能夠檢測出高度可重復的關(guān)鍵點,并且對噪聲具有魯棒性。然而,該方法對不同的網(wǎng)格分辨率非常敏感,并且檢測到的關(guān)鍵點非常少。此外,它還需要一個大的計算機內(nèi)存。

becab7bc-9fbb-11eb-8b86-12bb97331649.png

圖2 在不同姿態(tài)的犰狳模型上檢測到的關(guān)鍵點

bf0320fc-9fbb-11eb-8b86-12bb97331649.png

圖3 在犰狳模型上檢測到關(guān)鍵點

bf29cb62-9fbb-11eb-8b86-12bb97331649.png

結(jié)論

本文對基于局部表面特征的三維物體識別方法的研究現(xiàn)狀進行了綜述。對全面的3D對象識別方法進行了分類并分析了各種特征類型及其提取方法的優(yōu)缺點。

責任編輯:lq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 圖像
    +關(guān)注

    關(guān)注

    2

    文章

    1083

    瀏覽量

    40449
  • 檢測
    +關(guān)注

    關(guān)注

    5

    文章

    4480

    瀏覽量

    91442
  • 物體識別
    +關(guān)注

    關(guān)注

    0

    文章

    16

    瀏覽量

    7500

原文標題:基于局部表面特征在雜亂場景中的三維物體識別

文章出處:【微信號:vision263com,微信公眾號:新機器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    三維掃描與建模的區(qū)別 三維掃描在工業(yè)中的應用

    三維掃描與建模的區(qū)別 三維掃描與建模是兩種不同的技術(shù),它們在操作過程、輸出結(jié)果及應用領(lǐng)域上存在顯著的區(qū)別。 操作過程 : 三維掃描 :主要通過激光或光學掃描設(shè)備,獲取實物表面的形狀、紋
    的頭像 發(fā)表于 12-19 14:55 ?94次閱讀

    一種混合顏料光譜分區(qū)間識別方法

    古代彩繪顏料的分析是科技考古與文物保護研究的重要內(nèi)容,高光譜是近年來發(fā)展迅速的新興技術(shù),在物質(zhì)識別上具有廣泛應用,提出一種基于高光譜分區(qū)間的混合顏料識別方法。 一種混合顏料光譜分區(qū)間識別方法
    的頭像 發(fā)表于 12-02 16:22 ?68次閱讀
    一種混合顏料光譜分區(qū)間<b class='flag-5'>識別方法</b>

    三維電子背散射衍射(EBSD)技術(shù):FIB-SEM與EBSD的結(jié)合應用案例

    三維電子背散射衍射技術(shù)(3D-EBSD)在材料科學領(lǐng)域,對材料的微觀結(jié)構(gòu)進行精確分析是至關(guān)重要的。傳統(tǒng)的電子背散射衍射(EBSD)技術(shù)主要提供樣品表面的晶體學信息,但對于三維物體的內(nèi)部
    的頭像 發(fā)表于 11-29 17:31 ?185次閱讀
    <b class='flag-5'>三維</b>電子背散射衍射(EBSD)技術(shù):FIB-SEM與EBSD的結(jié)合應用案例

    三維打印技術(shù)原理

    三維打印技術(shù),又稱3D打印技術(shù),是一種快速成型技術(shù),其核心原理在于將數(shù)字模型文件逐層轉(zhuǎn)化為實體物體。以下是三維打印技術(shù)原理的詳細闡述:
    的頭像 發(fā)表于 09-16 15:31 ?668次閱讀

    泰來三維 工廠三維掃描建模技術(shù)服務

    通過利用三維掃描技術(shù)建立工廠物體三維模型,可以更加直觀地了解物體的形狀和尺寸信息,避免傳統(tǒng)測量方法的誤差和繁瑣操作,從而提高生產(chǎn)效率和質(zhì)量
    的頭像 發(fā)表于 07-22 13:14 ?314次閱讀
    泰來<b class='flag-5'>三維</b> 工廠<b class='flag-5'>三維</b>掃描建模技術(shù)服務

    泰來三維 三維激光掃描結(jié)合BIM在工廠掃描建模中的優(yōu)勢

    BIM技術(shù)是建設(shè)項目實施前的建筑信息模型搭建,三維激光掃描技術(shù)則是現(xiàn)實物體三維信息數(shù)字化。BIM具有可視化、協(xié)調(diào)性、優(yōu)化性、模擬性和可視圖形的特點,而三維掃描儀獲取的數(shù)據(jù)非常真實和準
    的頭像 發(fā)表于 07-19 10:39 ?377次閱讀

    泰來三維| 高精度三維掃描技術(shù)助力地質(zhì)標本資源數(shù)字化

    固定式藍光三維掃描儀OptimScan 5M Plus,適應不同尺寸、形狀的巖礦石標本高精度測量需求。可獲取巖石標本表面高精細特征(裂縫、凹坑等)。
    的頭像 發(fā)表于 04-02 15:28 ?428次閱讀
    泰來<b class='flag-5'>三維</b>| 高精度<b class='flag-5'>三維</b>掃描技術(shù)助力地質(zhì)標本資源數(shù)字化

    集成芯片管腳順序識別方法

    集成芯片管腳順序的識別方法主要依賴于芯片的類型和特征。
    的頭像 發(fā)表于 03-19 18:14 ?5353次閱讀

    泰來三維|文物三維掃描,文物三維模型怎樣制作

    文物三維掃描,文物三維模型怎樣制作:我們都知道文物是不可再生的,要繼續(xù)保存?zhèn)鞒?,需要文?b class='flag-5'>三維數(shù)字化保護,所以三維數(shù)字化文物保護是非常重要的一個技術(shù)手段。 那么文物
    的頭像 發(fā)表于 03-12 11:10 ?606次閱讀
    泰來<b class='flag-5'>三維</b>|文物<b class='flag-5'>三維</b>掃描,文物<b class='flag-5'>三維</b>模型怎樣制作

    顯微測量|光學3D表面輪廓儀微納米三維形貌一鍵測量

    光學3D表面輪廓儀(白光干涉儀)利用白光干涉原理,以0.1nm分辨率精準捕捉物體表面細節(jié),實現(xiàn)三維顯微成像測量,被廣泛應用于材料學領(lǐng)域的研究
    發(fā)表于 02-20 09:10 ?1次下載

    顯微測量|光學3D表面輪廓儀微納米三維形貌一鍵測量

    光學3D表面輪廓儀利用白光干涉原理,以0.1nm分辨率精準捕捉物體表面細節(jié),實現(xiàn)三維顯微成像測量。廣泛應用于材料學領(lǐng)域,可測量各種材料表面形貌,提高超光滑
    的頭像 發(fā)表于 02-19 13:47 ?730次閱讀
    顯微測量|光學3D<b class='flag-5'>表面</b>輪廓儀微納米<b class='flag-5'>三維</b>形貌一鍵測量

    貼片電感的識別方法及故障更換方法

    介紹貼片電感的識別方法和故障更換方法,以幫助讀者更好地理解和應用貼片電感。 一、貼片電感的識別方法 1. 外觀標識法: 首先,我們可以通過外觀特征
    的頭像 發(fā)表于 02-03 15:23 ?1959次閱讀

    三維輪廓測量儀:革命性技術(shù)在工業(yè)智能制造中的多重應用

    現(xiàn)代工業(yè)智能制造領(lǐng)域中,三維輪廓測量儀是一項重要的測量技術(shù)。三維輪廓測量儀利用光學、激光或光電等技術(shù)手段,通過測量物體表面輪廓的三維坐標信息,能實現(xiàn)對
    發(fā)表于 01-18 10:52 ?0次下載

    三維輪廓測量儀:革命性技術(shù)在工業(yè)智能制造中的多重應用

    三維輪廓測量儀利用光學、激光或光電等技術(shù)手段,通過測量物體表面輪廓的三維坐標信息,能實現(xiàn)對物體形狀、尺寸和表面
    的頭像 發(fā)表于 01-09 09:00 ?2489次閱讀
    <b class='flag-5'>三維</b>輪廓測量儀:革命性技術(shù)在工業(yè)智能制造中的多重應用

    三維視覺測量技術(shù)知識科普

    三維視覺測量技術(shù)按照測量過程中是否投射光源,獲取被測物體三維形貌信息的方法可以分為兩大類: 被動視覺測量和主動視覺測量。
    的頭像 發(fā)表于 01-03 11:47 ?833次閱讀
    <b class='flag-5'>三維</b>視覺測量技術(shù)知識科普
    RM新时代网站-首页