91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

基于毫米波雷達和機器視覺的夜間前方車輛檢測方案

電子工程師 ? 2018-03-31 09:23 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

為研究夜間追尾事故中本車智能防撞預警方法,本文提出了一種基于毫米波雷達機器視覺的前方車輛檢測方法。利用多傳感器融合數(shù)據(jù),檢測前方車輛的距離、速度等。建立傳感器之間轉換關系,轉換雷達目標的世界坐標到圖像坐標。

在圖像上形成感興趣區(qū)域,利用圖像處理方法減少干擾點,運用 Dempster-Shafer(D-S)證據(jù)理論,融合特征信息,得到總的信任度值檢驗感興趣區(qū)域內的車輛。實驗采集多段夜間道路行車視頻數(shù)據(jù),統(tǒng)計實現(xiàn)尾燈識別的幀數(shù),與主觀判斷進行比較。結果表明:該方法能夠實現(xiàn)對夜間前方車輛的檢測和定位。

本文來自 2016 年 6 月 15 日出版的《 汽車安全與節(jié)能學報 》,作者是吉林大學交通學院的金立生教授和程蕾以及清華大學汽車安全與節(jié)能國家重點實驗室的成波教授。

道路交通事故中由追尾相撞導致的事故占很大比例,而夜間交通事故尤為嚴重,約占交通事故總數(shù)的 40%。夜間車輛檢測技術已成為智能車輛安全輔助駕駛系統(tǒng)的重要組成部分,用于準確地識別夜間前方車輛,為駕駛員及時提供前方車輛信息及路況,降低夜間交通事故的發(fā)生 [1]。

夜間由于光線強度不夠,大部分白天的車輛特征信息已經(jīng)不可用,因此用于白天的車輛檢測算法基本失效。車輛尾燈是夜間車輛的明顯特征,目前,對于夜間前方車輛檢測識別的研究主要是利用單目視覺傳感器,獲取車輛前方的視覺感知信息,基于圖像信息提取尾燈特征進行前方車輛識別。

劉尊洋等人結合車輛尾燈的顏色與亮度檢測尾燈 [2];吳海濤等人對前車燈對配對進行車輛的跟蹤 [3];唐佳林等人采用幀差法提取感興趣區(qū)域 [4];王孝蘭選擇基于模糊理論的分割方法對圖像進行分割,提取車牌、尾燈的特征 [5];祁秋紅等人通過色調(hue)-飽和度(saturation)-明度(value)的顏色模型(HSV)對尾燈的顏色信息進行分割,辨出車輛位置[6];周俊杰采用基于R通道直方圖的紅(red)-綠(green)-藍(blue)彩色(RGB)空間自適應閾值分割圖像,自適應效果不是很理想 [7]。

機器視覺是一種用于車輛檢測的有效傳感器,但其有一定的局限性,因此有文獻提出綜合考慮激光雷達和機器視覺的信息,進行前方目標車輛檢測 [8-9]。雖然激光雷達和機器視覺在一定程度可以互補,但激光雷達對天氣、燈光、障礙物表面光滑度等干擾非常敏感,不適合復雜道路環(huán)境。

由于毫米波雷達不易受外界干擾而且測量的距離精度高,可以準確獲得前方車輛的速度、角度等深度信息。因此,本文提出利用毫米波雷達和機器視覺進行多傳感器數(shù)據(jù)融合,通過先驗知識篩選毫米波雷達探測到的障礙物數(shù)據(jù),融合雷達數(shù)據(jù)和圖像信息初步確立動態(tài)感興趣區(qū)域(Region of Interest,ROI),在縮小的范圍內基于視覺傳感器提取表征車輛的特征,運用 D-S 證據(jù)理論(Dempster-Shafer Evidential Theory)融合信息,減少了計算量和主觀閾值對檢測精確度的影響,提高了執(zhí)行速度和車輛定位的準確性。

1. 夜間車輛檢測算法實現(xiàn)

整個過程分為假設產(chǎn)生(Hypothesis Generation,HG)和假設檢驗(Hypothesis Verifcation,HV)兩部分:

假設產(chǎn)生過程利用雷達獲取候選目標的的距離、角度、速度等信息,進而得到候選目標的世界坐標,逆用攝像機標定原理得到世界坐標與圖像像素坐標的轉換關系,初步確定候選目標在圖像上的區(qū)域,即感興趣區(qū)域 ROI;

假設驗證過程是通過改進的自適應閾值確定方法(大津法,OTSU 法)進行圖像分割處理,進而利用圖像處理方法、先驗知識和 D-S 證據(jù)理論對感興趣區(qū)域檢測是否存在車輛特征。

圖 1 夜間前方車輛檢測方法流程圖

算法流程圖如圖 1 所示。

2. 假設產(chǎn)生(HG)

2.1 雷達數(shù)據(jù)處理及初選目標的確定

毫米波雷達接收到的是十六進制數(shù)據(jù),根據(jù)雷達協(xié)議解算數(shù)據(jù),并提取可以用于車輛檢測的有效信息包括:前方車輛相對于本車的角度、距離、速度、反射強度。在實際測量中,毫米波雷達獲取的信號有一部分是空目標信號、無效目標信號、靜止目標信號,首先要去除這 3 種目標信號的干擾。

根據(jù)國家規(guī)定車道寬度設置橫向寬度閾值,進行目標與自車的同車道判斷,保留行駛方向距離閾值和相對速度閾值內的目標,對篩選出的前方目標由近及遠的原則重新排序,使用同車道近距離原則初選有效目標,如表 1 所示。

表 1 初選有效目標信號

表 1 中:ID 表示雷達檢測得到的目標信號的標準幀號;α、R、Δv 分別為本車與目標信號的相對角度、相對距離、相對速度(?v = v1 - v0,v1 為目標速度,v0 為本車速度);p 從目標返回信號的強度,即反射率。

長距離的毫米波雷達掃描范圍是 1~175 m,中距離是 1~60 m。距離小于 1 m 時雷達就不能識別物體。以避免車輛行駛過程中與前方車輛發(fā)生追尾碰撞為出發(fā)點,在有效目標選擇過程中最關注的是與本車位于同一車道的前方最近車輛。當 Δv<0,有出現(xiàn)追尾事故的可能。因此,把雷達掃描近距離 1~60 m 內、離本車最近且 Δv<0 的車輛作為初選目標。

2.2 雷達數(shù)據(jù)和機器視覺的融合

雷達和機器視覺是不同坐標系的傳感器,因此要實現(xiàn)雷達和機器視覺的空間融合,必須建立兩傳感器所在坐標系的轉換模型,即雷達坐標與圖像像素坐標之間的轉換。雷達坐標系與圖像像素坐標系之間有著密切的聯(lián)系 [10],按照右手系原則建立坐標系,由式 (1)-(2) 確定坐標系之間的空間位置關系。

將世界坐標系中的點 ( XW, YW, ZW ) 變換到圖像像素坐標 ( u, v ),轉換公式為:

式中:( XW, YW, ZW, 1 )^T 是點的世界坐標,與其對應的攝像機齊次坐標是 ( XC, YC, ZC, 1 )^T,dx 與 dy 分別表示每個像素在橫、縱軸上的物理單位下的大小,f 是攝像機的焦距,s' 表示因攝像機成像平面坐標軸相互不正交引出的傾斜因子(Skew Factor),R 代表旋轉矩陣(為一個 3×3 的正交單位矩陣),t 代表平移向量,I 是元素全為 1 的對角矩陣,O=(0, 0, 0)^T。

毫米波雷達獲取的前方障礙物信息是在極坐標下的二維信息,將障礙物 P 的極坐標下的二維信息轉換到直角坐標系中,雷達坐標系的 X0O0Z0 平面與世界坐標系的 XOZ 平面平行,兩平面之間的距離為 Y0,通過雷達可以得到前方車輛中心點投影到雷達掃射平面內的點 P 相對雷達的距離 R 和角度 α,確定點 P 在世界坐標系下的坐標,轉換關系如下:

由雷達獲得前方車輛形心點的輸入,綜合以上建立雷達坐標系和圖像像素坐標系之間的相對關系,即可獲得前方車輛在像素平面的投影,基于車輛的常用外形(寬高比)投影在像素平面上,建立可以根據(jù)距離變化的動態(tài)感興趣區(qū)域,縮小在圖像上的搜索時間,減少計算量。通過統(tǒng)計發(fā)現(xiàn)一般車輛的寬高比在 0.7~2.0 范圍內,常見轎車、運動型多功能車(Sport Utility Vehicle,SUV)、面包車、商用車輛等車型的寬高比在 0.7~1.3 范圍內 [11],為了避免后續(xù)尾燈檢測時會遺漏尾燈目標,本文選取常見幾種車型的最大寬高比 W/H=1.3。

動態(tài)感興趣區(qū)域的確定如下:

式中:( x_lt, y_lt ),( x_rb, y_rb )分別為動態(tài)感興趣矩形區(qū)域的左上角點和右下角點的像素坐標,( x, y )為車輛形心點的像素坐標。

圖 2 雷達掃描圖

圖 3 雷達目標在圖像上的的 ROI

雷達掃描圖如圖 2 所示。雷達坐標系中的目標經(jīng)坐標轉換關系在圖像上形成的感興趣區(qū)域如圖 3 中的 (a) 列所示。動態(tài)感興趣區(qū)域的大小會隨目標的距離發(fā)生變化,以更適合的尺寸截取感興趣區(qū)域圖像進行下一步檢測驗證,縮小了檢測范圍,從而減少計算量提高檢測實時性。獲取的感興趣區(qū)域圖像如圖 3b 列所示。

3. 假設驗證(HV)

3.1 圖像分割

前方車輛尾燈對的灰度級與路面及背景的灰度級有明顯區(qū)別,采用閾值分割的方法可以快速準確地將尾燈對分割出來。

本文采用改進的 OTSU 算法分割圖像,凸顯出表征車輛特征的尾燈部分。改進的 OTSU 算法是以傳統(tǒng) OTSU 為基礎,從最小灰度值到最大灰度值遍歷,當灰度 T 使得方差 σ^2 = w_0*w_1*(μ_0-μ_1)^2 最大時,再次利用傳統(tǒng) OTSU 對圖像中大于 T 的部分從灰度 T 到最大灰度值遍歷,得到閾值 T0 使大于灰度值 T 的部分的方差最大,提取閾值 T0,用 T0 對感興趣區(qū)域圖像進行二值化分割,目標灰度為 1,背景灰度為 0。

圖 4 分割后圖像

分割后的圖像如圖 4 所示。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器視覺
    +關注

    關注

    165

    文章

    4797

    瀏覽量

    126030
  • 雷達
    +關注

    關注

    52

    文章

    3327

    瀏覽量

    123859
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    毫米波雷達氣密性檢測

    選對氣密性檢測儀,是保障毫米波雷達質量的關鍵環(huán)節(jié)。毫米波雷達因其結構精密、泄漏標準嚴苛,傳統(tǒng)檢測
    的頭像 發(fā)表于 12-18 14:28 ?299次閱讀
    <b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>氣密性<b class='flag-5'>檢測</b>儀

    微波雷達毫米波雷達有什么區(qū)別

    微波雷達毫米波雷達有什么區(qū)別 前言:不知道大家有沒有發(fā)現(xiàn),各種雷達模塊的使用開始逐漸加入各種智能家居產(chǎn)品了,像人來燈亮,人走燈滅這種雷達
    的頭像 發(fā)表于 10-30 16:56 ?2027次閱讀
    微波<b class='flag-5'>雷達</b>和<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>有什么區(qū)別

    全國產(chǎn)化毫米波雷達模組技術解析及智能感知應用方案指南

    一、市場分析與行業(yè)趨勢 1.1 毫米波雷達市場前景 隨著智能家居、安防監(jiān)控、智慧照明等領域的快速發(fā)展,毫米波雷達作為非接觸式感知技術正迎來爆發(fā)式增長。2023年全球
    的頭像 發(fā)表于 10-24 11:25 ?496次閱讀

    恩智浦如何釋放毫米波雷達的技術潛力

    在智能出行變革浪潮中,毫米波雷達正成為汽車感知系統(tǒng)的核心支柱。展望未來,下一代毫米波雷達將如何演進并賦能哪些創(chuàng)新應用?這無疑是開發(fā)者關心的話題。
    的頭像 發(fā)表于 08-19 14:25 ?1641次閱讀

    毫米波雷達重塑煤礦感知能力

    毫米波雷達在煤礦行業(yè)展現(xiàn)出巨大的應用潛力。隨著技術的不斷成熟、成本的下降以及針對煤礦特殊環(huán)境的優(yōu)化,毫米波雷達將為提升煤礦安全生產(chǎn)水平和智能化程度提供強有力的支持。
    的頭像 發(fā)表于 08-14 13:50 ?595次閱讀
    <b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>重塑煤礦感知能力

    一文帶你了解海凌科毫米波雷達

    什么是毫米波雷達?毫米波雷達有什么特點?毫米波雷達有什么作用?海凌科有哪些系列
    的頭像 發(fā)表于 08-11 12:04 ?1812次閱讀
    一文帶你了解海凌科<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>

    泰克示波器TBS1102C在毫米波雷達研發(fā)中的關鍵測試方案

    的觸發(fā)模式與高級分析功能,成為毫米波雷達研發(fā)團隊不可或缺的工具。本文將深入探討TBS1102C在毫米波雷達研發(fā)中的關鍵測試方案,助力工程師高
    的頭像 發(fā)表于 07-02 14:22 ?540次閱讀
    泰克示波器TBS1102C在<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>研發(fā)中的關鍵測試<b class='flag-5'>方案</b>

    自動駕駛毫米波雷達之間會相互干擾嗎?

    等優(yōu)點,被廣泛應用于自動駕駛和高級輔助駕駛系統(tǒng)。近年來,量產(chǎn)車型上毫米波雷達的裝配率不斷提高,小鵬P7就配備了5顆毫米波雷達,理想ONE配備了4顆
    的頭像 發(fā)表于 06-16 09:01 ?1933次閱讀
    自動駕駛<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>之間會相互干擾嗎?

    毫米波雷達的實車連續(xù)測量應用案例

    毫米波雷達憑借其出色的測距測速能力和全天候優(yōu)勢,在汽車組合輔助駕駛系統(tǒng)的傳感器中占有重要一席。隨著產(chǎn)品從2D、3D向4D升級,毫米波雷達的探測能力和應用場景不斷增強,4D
    的頭像 發(fā)表于 06-05 09:27 ?2764次閱讀
    多<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>的實車連續(xù)測量應用案例

    黑芝麻智能視覺與4D毫米波雷達前融合算法介紹

    本文介紹了黑芝麻智能視覺與4D毫米波雷達前融合算法,通過多模態(tài)特征對齊和時序建模,顯著提升逆光、遮擋等復雜場景下的目標檢測精度,增強輔助駕駛安全性。
    的頭像 發(fā)表于 05-08 09:27 ?2593次閱讀
    黑芝麻智能<b class='flag-5'>視覺</b>與4D<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>前融合算法介紹

    安信可60GHz毫米波雷達:高精度點云檢測

    在智能感知領域,毫米波雷達以其全天候、抗干擾能力強、檢測精度高等優(yōu)勢,成為智能交通、安防監(jiān)控、工業(yè)自動化等領域的關鍵傳感技術。 安信可科技緊跟行業(yè)發(fā)展趨勢,重磅推出全新 60GHz毫米波
    的頭像 發(fā)表于 04-29 17:53 ?1207次閱讀
    安信可60GHz<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>:高精度點云<b class='flag-5'>檢測</b>

    毫米波雷達+AI識別:智能閘口的核心技術

    在現(xiàn)代智慧物流和通關監(jiān)管領域,毫米波雷達+AI識別的技術組合正成為智能閘口解決方案的核心。這一技術不僅實現(xiàn)了車輛無感通行,更以99%以上的識別準確率重新定義了自動化監(jiān)管的標準。 一、
    的頭像 發(fā)表于 04-29 10:58 ?647次閱讀
    <b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>+AI識別:智能閘口的核心技術

    新品!30元左右的60GHz毫米波雷達模組重磅登場!

    60GHz毫米波雷達當前,隨著芯片集成度提升與算法優(yōu)化,60GHz毫米波雷達正加速向消費級市場滲透,成為實現(xiàn)精準、可靠、隱私安全的智能感知核心解決
    的頭像 發(fā)表于 04-23 18:02 ?1871次閱讀
    新品!30元左右的60GHz<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b>模組重磅登場!

    ADAS和防撞系統(tǒng)中的毫米波雷達方案

    汽車雷達是極可靠的傳感器技術,有不同類型的雷達用于汽車應用。毫米波(mmWave)雷達因其無論大氣條件多么惡劣都能穩(wěn)定地探測目標而廣受歡迎。在各種傳感器中,應用于汽車中的
    的頭像 發(fā)表于 04-07 09:47 ?2549次閱讀
    ADAS和防撞系統(tǒng)中的<b class='flag-5'>毫米波</b><b class='flag-5'>雷達</b><b class='flag-5'>方案</b>

    E54-24LD12B人體存在感應毫米波雷達模組功能介紹

    人體存在感應毫米波雷達模組,毫米波雷達模塊
    的頭像 發(fā)表于 03-21 10:30 ?1199次閱讀