RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

基于圖像處理識別技術在多車道車流信息檢測和統(tǒng)計中的應用

電子設計 ? 來源:電子技術應用 ? 作者:曹治錦 , 唐慧明 ? 2021-04-02 10:49 ? 次閱讀

在現(xiàn)代交通管理和道路規(guī)劃中,交通流量和通行車輛的類型、速度是重要的參數(shù)。自動獲取這些數(shù)據(jù)的方法大致可以分為兩類:一類是利用壓電、紅外、環(huán)形磁感應線圈等傳感器獲得車輛本身的參數(shù),這類方法跟蹤識別率較高,但是容易損壞,安裝也不方便;還有一類就是基于圖像處理和模式識別的方法,克服了前面一類方法的局限,由于圖像處理識別技術的進步和硬件性價比的大幅提高,有一定實用價值的系統(tǒng)已經(jīng)出現(xiàn)。這些系統(tǒng)的使用證明:圖像處理識別車型的方法日趨成熟,環(huán)境適應能力較強,能長期穩(wěn)定工作,但是計算量大,識別正確率不如感應線圈、激光讀卡等方法高。本文的研究屬于后者,利用安裝在高處的單個靜止攝像頭監(jiān)視路面,利用運動分割與模型匹配的方法,檢測并統(tǒng)計多車道的車流信息。

整個識別過程分三步:分割、跟蹤和車型判定。運動目標的分割常采用幀差法。在監(jiān)控場合,攝像頭大多是固定的,背景基本沒有變化或者變化緩慢,可以從圖像序列中逐漸取出背景圖像,然后利用幀差法檢測出目標區(qū)域,同時還可以檢測靜止目標。由于識別過程中利用二值邊緣圖像,所以本文在圖像分割中對輸入圖像進行了梯度二值化處理。三維空間和二維圖像平面之間映射關系的確定,采用基于針孔模型的攝像機定標來計算。對目標區(qū)域的跟蹤,采用了區(qū)域特征向量的匹配跟蹤方法,減小了運算量。由于圖像處理的方法很難提取輪數(shù)、軸距等車輛本身參數(shù),所以在圖像車型識別中一般都采用三維模型在圖像上投影和車輛邊緣相匹配的方法。

1 背景重建和圖像分割

由于攝像頭固定,背景變化緩慢,因此,可以利用圖像序列逐漸恢復出背景圖像。其基本原理是:對每一個像素進行監(jiān)控,如果在較長時間內(nèi)灰度不發(fā)生明顯變化,則認為該像素屬于背景區(qū)域,將該像素灰度值復制到背景緩沖區(qū),否則屬于前景區(qū)域。由于光照以及車輛陰影等影響,采用這種方法恢復出來的背景圖像存在較大噪聲。因此在實驗中對原始輸入圖像進行了梯度二值化處理,然后進行背景重建。這樣可以減小陰影的干擾,加快背景重建速度。由于識別是利用邊緣信息,所以梯度化對后面的識別過程沒有影響。

在得到背景邊界圖像后,利用幀差法可以分割出感興趣的目標。但是,如果目標區(qū)域和背景邊界重合(值都為“1”),相減之后該目標區(qū)域被錯誤判定為背景區(qū)域 (值為“0”)。為了減小錯誤判決區(qū)域,本文在分割時參考了相鄰兩幀的二值化幀差fdmask,判決準則如下:如果fdmask中某像素為“0”,則輸入圖像和背景圖像相應像素相減;否則直接復制輸入圖像中相應的像素值。分割結果經(jīng)過噪聲消除、形態(tài)學平滑邊界、種子填充、區(qū)域標記等后續(xù)處理,就分離出了目標。

2 攝像機定標

在模型匹配中,需要從二維圖像恢復目標三維信息,同時將三維模型投影到圖像平面上,因此必須計算三維空間到圖像平面的投影關系矩陣。這個過程就是攝像機定標。本文采用基于針孔模型的攝像機定標方法,其基本原理是利用給定的一組三維世界的點坐標和這些點在圖像中的坐標,求解線性方程組,計算透視投影矩陣中的各個元素。透視投影矩陣如下:

基于圖像處理識別技術在多車道車流信息檢測和統(tǒng)計中的應用

其中u,v)是圖像坐標,(w,w,w)是三維坐標,M為投影矩陣,c為三維空間中點到攝像機鏡頭的矢量在主光軸上的投影距離。要求解M的各個元素,根據(jù)文獻介紹需要6個點的投影關系組成12階的方程組,通常方程組不獨立,沒有唯一解,采用近似計算的誤差較大。在(1)式基礎上經(jīng)過變形,將12階方程分拆成三個4階方程組,只需要利用4個點的投影關系,方程組的階次也只有4階,可以有效避免出現(xiàn)奇異矩陣,求出唯一解。由式(1)可以得出:

另外,除了4組點的坐標之外,還需測定鏡頭主光軸的水平垂直傾角。

3 車輛的跟蹤和分類

在區(qū)域分割后,接下來進行區(qū)域跟蹤,利用相鄰兩幀的區(qū)域匹配從而在圖像序列中建立目標鏈,跟蹤目標從進入監(jiān)視范圍到駛離監(jiān)視范圍的整個過程。首先要確定匹配準則。常用的圖像匹配方法有 Hausdorff 距離匹配法和圖像互相關。這兩種方法都需要逐個像素的計算。為了減小計算量,采用區(qū)域特征跟蹤法。目標區(qū)域的特征包括區(qū)域形心坐標、區(qū)域包圍矩形、區(qū)域運動速度及運動方向和區(qū)域面積。本文匹配準則采用了兩個假定:同一目標所對應區(qū)域在相鄰兩幀中面積相近;同一目標在前一幀中的區(qū)域形心加上運動速度所得到的形心預測值與后一幀中區(qū)域形心距離相近。跟蹤過程如下:

(1)將第一幀的各個區(qū)域當作不同的目標,對各個目標區(qū)域啟動目標鏈。

(2)根據(jù)判決準則,如果某目標鏈中的區(qū)域在當前幀找到了匹配區(qū)域,則用找到的匹配區(qū)域特征更新該目標鏈中的區(qū)域特征。

(3)如果在形心預測值所在位置,當前幀區(qū)域和目標鏈中區(qū)域面積相差很大,則可以認為發(fā)生了合并或者分裂現(xiàn)象。對目標鏈中的區(qū)域包圍矩形,在本幀查找該矩形覆蓋了幾個區(qū)域,如果多于一個區(qū)域,則認為發(fā)生了分裂現(xiàn)象。對分裂現(xiàn)象出現(xiàn)的新區(qū)域,啟動新的目標鏈。同理,對于本幀區(qū)域的包圍矩形,查找該矩形覆蓋了幾個目標鏈中的區(qū)域,如果多于一個,則認為發(fā)生了合并現(xiàn)象,利用合并區(qū)域啟動新的目標鏈,同時終止那些被合并區(qū)域的目標鏈。

(4)對于目標鏈中的區(qū)域,如果在本幀沒有與之相匹配的區(qū)域存在,則認為發(fā)生了消失現(xiàn)象。目標鏈并不立即終止,只有在經(jīng)過數(shù)幀仍沒有找到匹配之后,才終止該目標鏈。

(5)查找本幀是否還存在新進入的區(qū)域,如果存在,則啟動新的目標鏈。

采用這種方法可以快速跟蹤圖像序列中的目標,同時得到車輛在監(jiān)視范圍的平均速度。在計數(shù)時,只有目標在連續(xù)數(shù)幀里出現(xiàn)才認為是一個真正的目標區(qū)域,只有目標在連續(xù)數(shù)幀都沒有出現(xiàn)才認為消失,因此可以消除那些暫時消失引起的計數(shù)錯誤。

車輛分類是個很復雜的問題。圖像處理方法要獲取輪數(shù)、軸距等車輛本身參數(shù)比較困難,因此圖像識別車型通常采用模型匹配方法?,F(xiàn)有的研究大多是先抽取馬輛的幾條直線邊緣,然后用線條和模型邊緣匹配。由于在圖像中抽取直線本身的計算量相當大,所以本文沒有抽取車輛邊緣直線,而是直接利用了Canny邊緣檢測的整體結果與模型相匹配。Canny邊緣與模型邊緣之間存在較大的形變,Hausdorff距離匹配對形變不敏感,所以采只Hausdorff距離作為匹配準則是很適宜的。

||bj-ai||(A,B)被稱為從A到B的有向Hausdorff 距離,它反映了A到B的不匹配程度。h(B,A)的意義與h(A,B)相似。在具體計算Hausdorff 距離時,通常采用距離變換的方法。車型分類步驟如下:

(1)在分割結果的基礎上,對目標區(qū)域進行Canny算子邊緣檢測,僅僅處理分割出的目標區(qū)域的邊緣,減小了運算量。

(2)對Canny邊緣,采用串行距離變換,得到距離邊換圖像。距離變換圖像的每個像素灰度值等于該像素到目標邊緣的最近距離。

(3)對各分割目標,恢復車輛的三維信息,只計算長度和寬度。由于二維圖像平面上一點對應了攝像機坐櫥中不同深度的一系列點,所以在從圖像上一點恢復到該點在世界坐標中的信息時,首先要給定該點在世界坐標中一個分量以減少不確定度(這樣恢復出來的數(shù)值有些誤差,通常給出Z方向高度值Zw)。

(4)在計算目標區(qū)域長度和寬度的同時,可以求出車輛底盤形心在地面上的位置(X,Y),根據(jù)速度方向判斷車輛在地面上的角度α。利用車輛本身的三維模型數(shù)據(jù)以及(X,Y,α),通過式(1)透視投影,消隱處理,可以確定車輛模型在圖像平面上的投影。

(5)當目標進入指定區(qū)域后,以模型投影圖像為核板,將投影圖像在距離變換圖像上移動,在每一個位置,求出模型投影圖像下距離變換圖像被模型輪廓線覆蓋的像素值之和,以這個和值作為在該位置當前模型與實際車輛的匹配程度。將當前模型在各位置所得匹配程度的最小值作為當前模型與車輛的實際匹配程度,該最小值除以模型輪廓線的像素數(shù)目,即該模型與車輛之間的Hausdorff距離。對各種模型,分別求出它們與車輛之間的Hausdorff距離,取其中最小值對應的那種模型即為車型識別結果。實驗過程中為了減小計算量,搜索方法采用了三步搜索法。

4 實驗結果

本實驗所采用的352x288視頻圖像,來自采用單千固定CCD攝像機于杭州天目山路拍攝的交通場景片斷。主要算法在Trimedial300 DSP上用C語言實現(xiàn),在圖像分割過程中進行了較多的梯度、降低噪聲、填充和標記運算,平均處理一幀大約耗時0.3s。算法流程的全過程如圖1所示。

實驗證明,抽取背景和當前幀之間進行差異檢測,分割較為準確。對于比較淡的陰影,用梯度二值化方法可以部分消除陰影影響。由于只監(jiān)視邊緣變化部分,背景重建速度比直接利用灰度圖像重建背景快很多,干擾也較小。梯度二值化處理之后重建背景只需150-200幀,而不經(jīng)過梯度二值化處理在上千幀之后仍然沒有較好的背景,并且點狀噪聲和云霧狀模糊比較嚴重。

跟蹤計數(shù)的結果表明,利用形心和面積作為特征,可以快速跟蹤圖像序列中的目標,計數(shù)正確率可達95%。計數(shù)誤差主要在于遮擋引起的分裂合并處理不能完全如實反映目標的運動,把合并區(qū)域當作新出現(xiàn)的區(qū)域。如果合并區(qū)域再次分裂,分裂出來的區(qū)域就會被當作新區(qū)域,造成計數(shù)偏大。為了簡化跟蹤算法,實驗僅在相鄰兩幀之間進行跟蹤匹配,這樣處理分裂合并的能力并不強,如果在多幀之間進行跟蹤,效果會好一些,但是算法比較復雜。

對于大小相差懸殊的車輛,如公共汽車和轎車,根據(jù)長度、寬度信息就很容易分別開來,根本不用進行后面的模型匹配。所以本文試驗主要針對了街道上常見的大小相差不太大的車輛,將它們分成了轎車、輕卡和面包車。試驗證明:直接利用Canny邊緣,根據(jù)Hausdorff距離匹配可以有效地對車型加以判別。由于沒有逐條抽取邊緣直線來與模型輪廓線匹配,計算量大為減小,算法實現(xiàn)簡單。由于轎車的外形大小變化相對較小,識別正確率最高,可達90%;輕型卡車次之;面包車的識別率最低,大約50-60%,錯誤部分主要被識別成轎車,主要原因是面包車的大小相差很大,模型匹配方法的一個不足也在于此。要提高識別率,模型細分是必需的工作。本試驗中攝像頭安裝在街道的前方,由于車輛最顯著的外形特征在于側(cè)輪廓,所以如果攝像頭安裝在街道旁邊拍撼車輛的側(cè)面圖像,可以認為識別效果應該會更好一些:另外,Canny算子的邊緣效果不是很好,噪聲比較大,也影響了判決結果。如果采用Hough變換抽取車輛邊緣的直線,計算量較大。如果陰影比較嚴重,還需要進行專門的去陰影處理。這些都是下一步工作要解決的問題。

責任編輯:gt

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關注

    關注

    2550

    文章

    51035

    瀏覽量

    753053
  • 攝像頭
    +關注

    關注

    59

    文章

    4836

    瀏覽量

    95596
收藏 人收藏

    評論

    相關推薦

    基于樹莓派設計的道路車道檢測系統(tǒng)

    的簡單快速的車道檢測。為了快速計算,我只是避免使用線性回歸方法。這種方法低噪聲環(huán)境下效果很好,但對于復雜的場景,需要先進的統(tǒng)計圖像
    的頭像 發(fā)表于 03-31 10:41 ?4333次閱讀
    基于樹莓派設計的道路<b class='flag-5'>車道</b><b class='flag-5'>檢測</b>系統(tǒng)

    ADAS方案設計成功關鍵:圖像處理技術

    /輔助ADAS的成功關鍵ADAS應用一般分為兩個層次:其一為視覺輔助系統(tǒng),包含倒車顯影功能等;第二為駕駛警示/輔助系統(tǒng),涵蓋車道偏移系統(tǒng)等。對于前者,視覺輔助系統(tǒng)圖像處理器僅須具備影
    發(fā)表于 09-01 17:09

    基于labview的汽車流檢測統(tǒng)計,有誰會

    基于labview的汽車流統(tǒng)計,采集某段路通過的汽車流量,用普通的攝像頭采集
    發(fā)表于 03-22 18:07

    貼片機的現(xiàn)代視覺與圖像識別技術

    :  ·雙照相機應用——一個貼裝單元中用于小元件的快速照相機和用于較大IC電路的高分辨率照相機,各司其職,發(fā)揮最大效益;  ·下視、上視照相機——分別解泱印制電路板基準和元器件校準;  ·飛行對中技術——提高機器速度;  ·高速、高效的
    發(fā)表于 09-03 10:25

    如何檢測統(tǒng)計車道車流信息?

    本文利用安裝在高處的單個靜止攝像頭監(jiān)視路面,利用運動分割與模型匹配的方法,檢測統(tǒng)計車道車流信息
    發(fā)表于 05-17 06:06

    怎么實現(xiàn)基于OMAP3530平臺的車道識別檢測的設計?

    本文提出的車道識別算法的流程如下圖1所示,首先通過OV7670攝像頭捕獲道路圖像,然后按照流程圖中的步驟處理圖像,最后得到清晰的
    發(fā)表于 06-02 06:31

    基于圖像車道檢測

    基于圖像車道檢測,點擊上方“3D視覺工坊”,選擇“星標”干貨第一時間送達文章導讀本文是一篇從零開始做車道檢測Demo的教學式文章,從場
    發(fā)表于 07-20 06:24

    淺談射線檢測圖像識別

    射線實時成像無損檢測技術,目前圖像采集技術圖像
    發(fā)表于 01-23 15:51 ?12次下載

    基于圖像處理車道偏離的研究和實現(xiàn)

    利用ADI公司的DSP評估板,結合數(shù)字圖象處理技術,設計出了一套實用的車道偏離檢測系統(tǒng)平臺。該系統(tǒng)采用兩個CMOS攝像頭采集圖像信號,輸入到
    發(fā)表于 03-01 14:16 ?25次下載

    車道識別技術

    文中分析由車載攝像頭獲取的道路圖像的特點, 提出基于霍夫變換的車道識別算法, 能夠自動提取原始圖像
    發(fā)表于 04-11 14:40 ?72次下載
    <b class='flag-5'>車道</b><b class='flag-5'>識別</b><b class='flag-5'>技術</b>

    RFID原理簡介及其交叉口車流檢測系統(tǒng)的應用

    本文采用RFID( radio frequency identifica-tion)技術檢測進入交叉路口的車道流量數(shù),RFID技術交通信號
    發(fā)表于 10-30 15:42 ?2次下載
    RFID原理簡介及其<b class='flag-5'>在</b>交叉口<b class='flag-5'>車流</b>量<b class='flag-5'>檢測</b>系統(tǒng)<b class='flag-5'>中</b>的應用

    基于自適應虛擬線圈的車流檢測算法

    針對虛擬線圈檢測算法車道車流檢測存在誤檢或者
    發(fā)表于 12-08 14:56 ?0次下載

    圖像識別技術原理 圖像識別技術的應用領域

    。圖像識別技術已經(jīng)各個領域廣泛應用,其應用領域包括但不限于以下幾個方面。 一、智能安防領域 圖像識別技術
    的頭像 發(fā)表于 02-02 11:01 ?2409次閱讀

    圖像檢測識別技術的關系

    檢測技術是指利用計算機視覺技術,對圖像的特定目標進行定位和識別的過程。它通常包括
    的頭像 發(fā)表于 07-03 14:43 ?630次閱讀

    圖像識別技術包括自然語言處理

    計算機視覺技術圖像進行處理、分析和理解,從而實現(xiàn)對圖像的目標、場景、行為等信息
    的頭像 發(fā)表于 07-16 10:54 ?725次閱讀
    RM新时代网站-首页