91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于激光雷達信息與單目視覺信息的車輛識別方法

電子設(shè)計 ? 來源:電子設(shè)計 ? 作者:電子設(shè)計 ? 2020-11-03 20:56 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

采用單一傳感器識別前方車輛易造成誤判,為了提高檢測準確率,提出了一種基于激光雷達信息和單目視覺信息的車輛識別方法,該方法綜合考慮了激光雷達傳感器和單目視覺傳感器的信息。首先對激光雷達原始信號進行預處理,然后對篩選后的數(shù)據(jù)進行最臨近距離法聚類處理,并轉(zhuǎn)換到圖像坐標系中,初步確定障礙物檢測的 ROI (感興趣區(qū)域)。

提取 ROI 區(qū)域的圖像,并對其進行灰度化,灰度增強和圖像濾波的預處理。通過計算預處理后圖像的熵值歸一化對稱性測度,完成前方車輛的檢測。通過實驗,驗證該方法可以較好地識別前方車輛,彌補了單一傳感器在車輛識別中的不足,同時耗時較短,可以滿足實時性的要求。

1.現(xiàn)有評價體系難以保證車輛識別的實時性

對于自主車輛而言,識別障礙車輛是自主車輛環(huán)境感知系統(tǒng)中的關(guān)鍵技術(shù)。準確地檢測前方車輛,對于自主車輛避障具有重要的意義。目前國內(nèi)外學者已經(jīng)研究出許多車輛識別的算法,如基于視覺信息以及基于激光雷達信息等方法。

由于視覺圖像獲取較易、處理方法多樣,所以視覺技術(shù)是現(xiàn)階段自主車輛研究中的主要獲取信息手段。其中視覺技術(shù)主要分為單目視覺和雙目視覺。單目視覺識別技術(shù)多采用基于車輛特征的方法,該方法主要利用車輛與背景有差異的特征,如紋理、邊緣和底部陰影等。

但這種方法獲取的信息量不足,缺乏深度信息,而且易受外部環(huán)境的干擾,諸如光照和陰影等因素。雙目視覺識別技術(shù)雖然可以取得較好的效果,但其計算量較大,算法復雜,難以保證車輛識別的實時性。

激光雷達能夠獲得場景的距離信息,不易受光照等外部條件的影響,但其獲取的外部信息不充分,易造成誤判。而采用多傳感器融合技術(shù)可以克服單一傳感器獲取信息量不足,探測范圍小的缺點。

曾杰等分別通過毫米波雷達和攝像頭對前方車輛進行檢測,然后分別對雷達和攝像頭檢測到的目標進行目標一致性檢測,可以較為準確地檢測出前方車輛的寬度、位置等信息,但此方法需要處理整幅圖像,運算量較大,且面對尾部特征復雜的情況時易出現(xiàn)漏檢情況。

楊磊等通過對雷達信號進行預處理,確定感興趣區(qū)域,采用 Canny 算子進行邊緣檢測,確定車輛的具體位置,雖然算法較為簡單,但易受外部光照環(huán)境影響,準確率不夠理想。高德芝等采用基于密度的空間聚類算法對雷達信息進行聚類確定感興趣區(qū)域,利用 T- 模糊推理系統(tǒng)融合車輛的灰度、寬高比和信息熵等多個特征驗證車輛假設(shè),可以實現(xiàn)較好的識別效果,但是算法較為復雜,難以滿足實時性要求。

為了使車輛識別算法具有較好的準確性,同時減少算法的復雜程度,本文采用激光雷達和單目視覺兩種傳感器相結(jié)合的車輛識別方法,即先對激光雷達信號進行預處理,并采用最鄰近距離法進行聚類,初步確定感興趣區(qū)域,然后對感興趣區(qū)域進行預處理操作,計算感興趣區(qū)域的熵值歸一化對稱性測度,對初步確定的感興趣區(qū)域進行驗證,完成對前方車輛的識別。

2.傳感器配置及初步確認感興趣區(qū)域

2.1 傳感器配置

本文進行分析的數(shù)據(jù)來自 KITTI 數(shù)據(jù)庫,KITTI 數(shù)據(jù)庫是目前為止地面自主車輛研究中最大最全的公布數(shù)據(jù)庫。

該數(shù)據(jù)庫提供了慣導系統(tǒng)、64 線激光雷達、黑白立體攝像機、彩色立體攝像機的同步數(shù)據(jù),其中攝像機提供的是去除畸變之后的圖像。

激光雷達以 10 幀 / 秒的速度觸發(fā)攝像機進行拍攝,因此其時間同步性也得到了保證,同時該數(shù)據(jù)庫對各傳感器都進行了標定,標定參數(shù)已知。該數(shù)據(jù)庫進行測試的車輛的傳感器安裝位置如圖 1 所示,由于只選取了該數(shù)據(jù)庫中的激光雷達和其中一個彩色攝像頭的數(shù)據(jù),故圖 1 中只標出了這兩個傳感器的安裝位置。

2.2 雷達信號的預處理

本文所研究數(shù)據(jù)的雷達信息由 Velodyne HDL64 線三維激光雷達采集。64 線激光雷達的點云數(shù)據(jù)量非常大,約 100 萬個點 / 秒。如圖 2 所示,若直接對雷達數(shù)據(jù)進行分析,系統(tǒng)所需處理的信息量過大,難以滿足實時性的要求。因此,在通過雷達數(shù)據(jù)獲取感興趣區(qū)域前,需要對雷達數(shù)據(jù)進行預處理。

由圖 2 可以看出,未處理的雷達信號將路面也掃描在內(nèi),由于本文主要對前方車輛進行檢測,因此將高度低于 0.2 m 的雷達信號剔除。汽車在行駛中,位于不同車道內(nèi)行駛的車輛對于自車的影響程度不同,位于本車同車道的前方車輛和相鄰車道的前方車輛對自車的安全影響最大,為了減少處理的數(shù)據(jù)量,本文算法主要對主車道和旁側(cè)車道的目標進行識別。

同時根據(jù)圖 2 所示,在縱向距離 40 m 之后,激光雷達的數(shù)據(jù)點越來越稀疏,難以提取有效的障礙物信息,而且視覺傳感器難以表現(xiàn) 40 m 外目標的特征。綜上,將前方縱向 40 m,橫向 10 m 作為雷達的有效區(qū)域。經(jīng)過上述預處理的雷達信號如圖 3 所示。


2.3 聚類處理及感興趣區(qū)域的獲取

如圖 3 所示,經(jīng)過預處理的激光雷達點較為分散,對于同一個目標,雷達會返回多個值。因此,為了從雷達數(shù)據(jù)中提取出有效的障礙物信息,需要對雷達數(shù)據(jù)進行聚類。

聚類分析作為一種常用的模式識別方法,在處理數(shù)據(jù)集中發(fā)揮著重要的作用,通過對雷達數(shù)據(jù)進行聚類處理,可以使雷達數(shù)據(jù)得到簡化,判斷出車前障礙物的數(shù)量和位置。

常用的聚類方法主要有柵格聚類法、距離聚類法和密度聚類法等,為了減少算法的復雜程度,本文采用最臨近距離法對目標進行聚類。

具體步驟如下:把經(jīng)過預處理的雷達數(shù)據(jù)按照與自車的縱向距離由近及遠進行重新排列,并按照順序為各障礙點編號。給 1 號障礙點賦值類別編號為 1,然后按順序計算之后障礙點與之前所有同類別障礙點之間的歐氏距離。并根據(jù)普通車輛的寬度設(shè)定預設(shè)閾值:

具體的流程圖如圖 4 所示。

對雷達進行聚類處理后,將雷達信號由世界坐標系轉(zhuǎn)換至圖像坐標系中。對每個類別進行如下操作:在圖像坐標系中,將該類別內(nèi)最左側(cè)的點和最右側(cè)的點分別向左和向右移動 5 個像素點,并將這兩個點所在的列作為矩形區(qū)域的左右邊界。

將該類別內(nèi)最上面和最下面的點分別向上和向下移動 5 個像素點,這兩個點所在的行為矩形區(qū)域的上下邊界。如圖 5 所示,矩形區(qū)域即為初步獲取的感興趣區(qū)域。

3.車輛特征識別

對雷達信號進行處理之后,初步獲得的感興趣區(qū)域可能有多個,路牌、樹木等無關(guān)物體也被檢測在內(nèi)。因此需要對感興趣區(qū)域進一步驗證,剔除非車輛的干擾。本文通過檢測感興趣區(qū)域的熵值歸一化對稱性測度來驗證目標車輛。

3.1 圖像預處理

通過視覺傳感器采集的前方道路信息會受到光照等因素的影響,降低其成像質(zhì)量,因此需要對感興趣區(qū)域進行預處理。

通過預處理之后的圖像,可以突出有用的信息,去除背景環(huán)境的干擾。本文采取的預處理流程包括圖像灰度化、圖像灰度增強和濾波去噪。

由于獲取的圖像為彩色圖像,信息量較大,為了減少計算量,需要首先對原始感興趣區(qū)域進行灰度化處理。獲取灰度化圖像之后,采用直方圖均衡化的方法進行灰度增強,增加圖像的全局對比度。

同時,經(jīng)過灰度處理的圖像往往存在噪聲干擾,因此需要對圖像進行濾波,由于中值濾波在一定程度上可以保留圖像細節(jié),而且算法簡單,故本文采取中值濾波對圖像進行處理。圖 6 為原始感興趣區(qū)域,圖 7 為預處理之后的感興趣區(qū)域。

3.2 車輛驗證

感興趣區(qū)域圖像中的車輛尾部具有非常好的灰度對稱性。灰度對稱性指以車輛區(qū)域中線為軸,左右區(qū)域的灰度值為軸對稱圖形。設(shè) R(x) 為 ROI 區(qū)域內(nèi)某一行灰度數(shù)據(jù)的一維函數(shù),因此其可以被表達為奇函數(shù)和偶函數(shù)的形式,對應感興趣區(qū)域的對稱性測度可以通過其分離出的偶函數(shù)所占的比重來決定。

對感興趣區(qū)域逐行計算其對稱性測度,然后求取其平均值,從而獲得感興趣區(qū)域的水平灰度對稱性測度。

但是通常情況下,圖像中道路及部分背景的灰度圖像也具有水平對稱性的特點,僅通過灰度圖像的水平對稱性測度來判斷是不夠的,容易造成誤判,因此需要檢測其他特征來增加判斷的準確率。本文采用熵值歸一化的對稱性測度來驗證車輛的存在。

通常情況下車輛所在區(qū)域所含的信息量要比背景區(qū)域多,因此可以將其作為識別車輛的依據(jù)之一。在信息論中,信息熵可以作為特定區(qū)域包含信息量的度量,其定義如式(7)所示:

4.仿真實驗

4.1 實例分析

為驗證上述車輛檢測算法的性能,本文選擇 KITTI 數(shù)據(jù)庫中的部分數(shù)據(jù)進行離線數(shù)據(jù)驗證。算法采用 Matlab 編寫,圖像分辨率為 750×375。具體的測試環(huán)境如圖 8(c)所示,包括單目標識別,多目標識別等。

識別結(jié)果如圖 8 所示,其中圖 8(a)為激光雷達采集到的原始數(shù)據(jù),圖 8(b)為經(jīng)過預處理之后的激光雷達數(shù)據(jù),圖 8(c)為車輛檢測結(jié)果及對應結(jié)果的熵值歸一化對稱性測度。

4.2 實驗分析

除此之外,本文采用上述算法對 KIT?TI 數(shù)據(jù)庫中城市道路總計 572 幀的數(shù)據(jù)進行分析驗證。采用本文算法正確識別車輛的數(shù)量和處理時間等數(shù)據(jù)如表 1 所示。

由表 1 可得,采用本文方法的正確檢測率為 91.3%,誤檢率為 3.5%,漏檢率為 8.7%。實驗表明該算法在城市道路環(huán)境下,具有較好的適應性,能夠排除樹木、建筑等無關(guān)物體的干擾,能較為準確地識別前方車輛,可以滿足自主車輛對前方車輛識別精度的要求。

由于 KITTI 數(shù)據(jù)庫采集數(shù)據(jù)的頻率為 10 Hz,本文算法的平均處理時間為 34 ms,可以滿足實時性的要求。

漏檢分析:由于選取的雷達識別區(qū)域為固定值,當車輛在道路邊緣行駛時,可能會出現(xiàn)對識別范圍外的車輛信息不敏感的情況,從而造成外側(cè)車輛的漏判,對自車安全造成威脅。

針對此種情況,可以將雷達的識別范圍動態(tài)化,使識別范圍隨車輛行駛的條件而變化,即首先進行道路識別,提取可通行道路區(qū)域,然后根據(jù)可通行道路區(qū)域識別的結(jié)果確定雷達的有效識別區(qū)域,降低漏判率,提升自主車輛的安全性能。

誤檢分析:當依靠自然光獲取圖像時難免會受到光照的影響,在光照不足時,會導致圖像細節(jié)模糊不清,紋理特征不明顯,從而使感興趣區(qū)域的熵值歸一化對稱性測度產(chǎn)生較大幅度變化,非車輛目標被檢測為車輛目標,造成誤檢。

針對此種情況,可以在原有基礎(chǔ)上進一步檢測感興趣區(qū)域的其他特征,例如底部陰影、寬高比和邊緣特征等,綜合考慮多種特征,減少非車輛目標對檢測算法的影響。

5.結(jié)論

本文提出了一種模型較為簡練的基于雷達信息和單目視覺信息的前方車輛檢測方法。該方法利用激光雷達信息初步劃分車輛檢測的感興趣區(qū)域,并通過檢測感興趣區(qū)域的熵值歸一化對稱性測度完成對前方車輛的確認。

實驗表明該方法在城市道路環(huán)境下,正確檢測率為 91.3%,可以實現(xiàn)較好的識別效果。同時該算法模型較為簡練,單幀圖像的平均處理時間為 34 ms,在保證車輛識別準確率的同時,也能保證車輛識別的實時性,降低了自主車輛對于處理器硬件的需求,具有較好的工程應用前景。

審核編輯 黃昊宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 激光雷達
    +關(guān)注

    關(guān)注

    980

    文章

    4473

    瀏覽量

    196581
  • 視覺信息
    +關(guān)注

    關(guān)注

    0

    文章

    4

    瀏覽量

    1568
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    灰塵是如何影響激光雷達識別效果的?

    [首發(fā)于智駕最前沿微信公眾號]在自動駕駛系統(tǒng)中,激光雷達作為重要的感知硬件,成為了很多車企的主要選擇。激光雷達雖然可以獲得環(huán)境的深度信息,但在灰塵較多的環(huán)境下,會出現(xiàn)返回信號被大量散射和衰減、點云中
    的頭像 發(fā)表于 02-11 09:15 ?413次閱讀
    灰塵是如何影響<b class='flag-5'>激光雷達識別</b>效果的?

    自動駕駛激光雷達會傷害人體嗎?

    [首發(fā)于智駕最前沿微信公眾號]隨著自動駕駛技術(shù)的普及,激光雷達的使用也越來越多。現(xiàn)在我們很容易就看到搭載激光雷達車輛在路上行駛。很多人聽到“激光”后總會有一種擔憂,害怕自動駕駛汽車上
    的頭像 發(fā)表于 02-05 08:59 ?260次閱讀
    自動駕駛<b class='flag-5'>激光雷達</b>會傷害人體嗎?

    如何解決激光雷達點云中“鬼影”和“膨脹”問題?

    [首發(fā)于智駕最前沿微信公眾號]之前在聊激光雷達點云“鬼影”和“膨脹”的文章中( 相關(guān)閱讀: 激光雷達點云中“鬼影”和“膨脹”是什么原因?qū)е碌??),很多小伙伴都提到一個問題,那就是激光雷達點云中
    的頭像 發(fā)表于 01-02 09:30 ?389次閱讀
    如何解決<b class='flag-5'>激光雷達</b>點云中“鬼影”和“膨脹”問題?

    ToF 技術(shù)再進化:面陣固態(tài)激光雷達在各環(huán)境中的可靠性

    面陣固態(tài)激光雷達的“發(fā)家史”激光雷達通常由激光發(fā)射、激光接收、光束操縱和信息處理四大系統(tǒng)組成,其工作原理是向目標探測物發(fā)送探測信號(
    的頭像 發(fā)表于 12-13 11:51 ?363次閱讀
    ToF 技術(shù)再進化:面陣固態(tài)<b class='flag-5'>激光雷達</b>在各環(huán)境中的可靠性

    激光雷達為什么會出現(xiàn)串擾的問題?

    [首發(fā)于智駕最前沿微信公眾號]自動駕駛技術(shù)自提出以來,激光雷達就是非常重要的感知硬件,即便到現(xiàn)如今很多技術(shù)方案開始傾向于純視覺時,依舊有很多的車企堅定地選擇激光雷達激光雷達常見的工作
    的頭像 發(fā)表于 11-04 10:42 ?809次閱讀
    <b class='flag-5'>激光雷達</b>為什么會出現(xiàn)串擾的問題?

    800線!禾賽發(fā)布ETX激光雷達

    。 ? 作為專為L3/L4級自動駕駛打造的旗艦產(chǎn)品,ETX激光雷達的核心突破在于實現(xiàn)了數(shù)字光子平臺技術(shù)的全棧自研。從激光發(fā)射、信號處理到光子接收三大核心模塊,再到
    發(fā)表于 09-13 16:16 ?2122次閱讀

    自動駕駛激光雷達可以安裝在哪些位置?

    構(gòu)建出高精度的三維點云圖,讓車輛“看”到前方、側(cè)方乃至后方的各類物體輪廓及距離信息。要讓激光雷達發(fā)揮最佳性能,除了選型和算法優(yōu)化之外,合理的安裝位置至關(guān)重要,不同部位安裝的激光雷達各有
    的頭像 發(fā)表于 09-08 09:19 ?1002次閱讀

    基于凌智視覺識別模塊的基于目視覺的目標物測量裝置

    1.視覺測量整體方案本視覺測量系統(tǒng)采用目視覺技術(shù)實現(xiàn)目標物距離
    的頭像 發(fā)表于 07-31 15:35 ?990次閱讀
    基于凌智<b class='flag-5'>視覺</b><b class='flag-5'>識別</b>模塊的基于<b class='flag-5'>單</b><b class='flag-5'>目視覺</b>的目標物測量裝置

    【SOA是什么?】#激光雷達

    激光雷達
    天津見合八方光電科技有限公司
    發(fā)布于 :2025年07月15日 14:39:59

    全固態(tài)激光雷達為什么遲遲未來?其技術(shù)難點是什么?

    [首發(fā)于智駕最前沿微信公眾號]激光雷達(LiDAR)作為自動駕駛車輛環(huán)境感知的“第三只眼”,能夠發(fā)射激光脈沖并接收反射光,實時構(gòu)建周圍物體的三維點云,從而為車輛決策提供精準的距離和形狀
    的頭像 發(fā)表于 07-11 09:02 ?1136次閱讀

    福特:激光雷達是極其重要的

    激光雷達技術(shù)比特斯拉的純視覺方案更勝一籌。Farley甚至將激光雷達稱為福特自動駕駛戰(zhàn)略中“極其重要”的技術(shù),這走在了特斯拉技術(shù)路線的對立面。 ? Farley表示:“當你的品牌是福特時,面對新技術(shù)必須格外謹慎。我們堅信LiD
    的頭像 發(fā)表于 07-07 06:01 ?2639次閱讀

    自動駕駛只用激光雷達進行感知會有哪些問題?

    [首發(fā)于智駕最前沿微信公眾號]自動駕駛依賴激光雷達(LiDAR)技術(shù)已成為行業(yè)內(nèi)的主流選擇之一。激光雷達通過發(fā)射和接收激光脈沖,繪制周圍環(huán)境的三維點云,為車輛提供精確的空間感知能力。之
    的頭像 發(fā)表于 07-02 08:59 ?1044次閱讀

    機械、半固態(tài)、全固態(tài)激光雷達有何區(qū)別?誰更適合自動駕駛?

    [首發(fā)于智駕最前沿微信公眾號]激光雷達(LiDAR)作為自動駕駛車輛感知環(huán)境的核心傳感器之一,通過激光脈沖實時獲取周圍物體的三維位置信息,從而為車輛
    的頭像 發(fā)表于 06-05 09:04 ?1382次閱讀
    機械、半固態(tài)、全固態(tài)<b class='flag-5'>激光雷達</b>有何區(qū)別?誰更適合自動駕駛?

    一種新型激光雷達慣性視覺里程計系統(tǒng)介紹

    針對具有挑戰(zhàn)性的光照條件和惡劣環(huán)境,本文提出了LIR-LIVO,這是一種輕量級且穩(wěn)健的激光雷達-慣性-視覺里程計系統(tǒng)。通過采用諸如利用深度與激光雷達點云關(guān)聯(lián)實現(xiàn)特征的均勻深度分布等先進技術(shù),以及利用
    的頭像 發(fā)表于 04-28 11:18 ?1108次閱讀
    一種新型<b class='flag-5'>激光雷達</b>慣性<b class='flag-5'>視覺</b>里程計系統(tǒng)介紹

    激光雷達技術(shù):自動駕駛的應用與發(fā)展趨勢

    激光雷達是一種通過發(fā)射激光束并接收反射光束來測量物體距離和速度的傳感器。它能夠生成周圍環(huán)境的精確三維地圖,為自動駕駛車輛提供關(guān)鍵的感知信息。激光雷達
    的頭像 發(fā)表于 03-10 10:16 ?1683次閱讀
    <b class='flag-5'>激光雷達</b>技術(shù):自動駕駛的應用與發(fā)展趨勢