91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

機器人定位及建圖的準確性和魯棒性

hl5C_deeptechch ? 來源:DeepTech深科技 ? 作者:DeepTech深科技 ? 2021-01-06 11:24 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

將一個機器人隨機放入未知環(huán)境中,是否有辦法讓機器人一邊移動一邊確定自己的位置并構建該環(huán)境的地圖?近日,由重慶大學王科副教授帶領的團隊的論文 SBAS:Salient Bundle Adjustment for Visual SLAM,將顯著性預測模型應用于 SLAM 框架中去,模擬人類執(zhí)行這一任務的過程,有效提升了機器人定位及建圖的準確性和魯棒性。

69a3b94c-4fce-11eb-8b86-12bb97331649.png

1. 什么是 SLAM?

SLAM 的全稱是 Simultaneous Localization And Mapping,即同時定位與建圖。

通俗來說,該技術希望搭載特定傳感器的機器人在未知的環(huán)境中,通過不斷的運動提取環(huán)境中的特征如墻角、柱子等來估計自身的位置,并同時根據(jù)傳感器觀測到的數(shù)據(jù)建立環(huán)境的地圖,從而達到同時定位和地圖構建的目的。

通常情況下,基于幾何的方法的 SLAM 技術可以分為兩類:特征法和直接法。

特征法通過提取和匹配圖像中的關鍵點通過最小化重投影誤差來估計相機的姿態(tài),而直接法則直接利用圖像中的像素強度通過最小化光度誤差來估計相機的姿態(tài)。目前,該領域已經(jīng)有了一些較為出色的算法模型。

MonoSLAM 是第一個使用擴展卡爾曼濾波(EKF)和 Shi-Tomasi 角點的實時視覺 SLAM 系統(tǒng)。該方法簡化了 SLAM 對硬件的要求,并可以被應用于仿人機器人實時 3D 定位和建圖以及手持相機的在線增強現(xiàn)實。

69d0f72c-4fce-11eb-8b86-12bb97331649.png

PTAM 是最早提出將 Track 和 Map 分開作為兩個線程的一種 SLAM 算法,也是一種基于關鍵幀的單目視覺 SLAM 算法。采用非線性優(yōu)化方法代替基于濾波器的方法作為后端優(yōu)化方法,PTAM 提出并實現(xiàn)了跟蹤映射過程的并行化。

6a187e26-4fce-11eb-8b86-12bb97331649.png

直接法不提取特征點,而是利用像素強度通過最小化光度誤差來估計攝像機的姿態(tài)?;谥苯臃ǖ?SLAM 模型如下:

DTAM 是第一個使用直接方法生成密集三維地圖的系統(tǒng)。然而,它需要商用 GPU 來執(zhí)行復雜的計算。為了提高效率,SVO 提取 FAST 特征,然后利用直接法的方式來估計攝像機的姿態(tài)和三維結(jié)構。

6a67dda4-4fce-11eb-8b86-12bb97331649.png

LSD-SLAM 擴展了這項工作,并且可以在大比例尺環(huán)境下生成半密集地圖。同時能夠?qū)⑷S環(huán)境地圖實時重構為關鍵幀的姿態(tài)圖和對應的半稠密的深度圖。

6aba2a50-4fce-11eb-8b86-12bb97331649.png

除了基于幾何的方法的 SLAM 外,基于深度學習的 SLAM 憑借神經(jīng)網(wǎng)絡強大的學習能力也取得了很大的進步。PoseNet 是最早使用 CNN 端到端估計相機姿態(tài)的方法之一。Deep VO 使用 RNN 來建模運動動力學和圖像序列之間的關系,ESP-VO 在此基礎上增加了位姿估計的不確定性估計。

2. 基于顯著性模型的 SLAM 框架

6b223d7a-4fce-11eb-8b86-12bb97331649.png

圖 | 框架總覽

為更好地解決現(xiàn)有 SLAM 框架的問題,作者提出了一個適用于室內(nèi)和室外環(huán)境的 SLAM 框架,它可以應用于各種場景,具有較好的魯棒性和準確性。

上圖為整體框架的簡化說明,它包括兩個組件:基于幾何法的 SLAM 管道和基于深度學習的顯著性預測模塊。顯著性預測模塊生成與 SLAM 數(shù)據(jù)集相對應的顯著性圖。然后,將顯著性圖作為輸入,幫助 SLAM 選擇顯著的特征點,以提高定位的準確性和魯棒性。

視覺顯著性是指模仿人類視覺系統(tǒng),從自然場景中選擇出最顯著、最感興趣的區(qū)域或點,以便在不同的任務下進行進一步的處理。近年來,有許多基于深度學習的方法來預測自然場景中的顯著性區(qū)域,并取得了很好的效果。然而,這些顯著性預測方法并不能完全描述 SLAM 系統(tǒng)應該關注的特征,原因是這些方法只使用原始的人類注視信息,例如,在駕駛車輛行駛的過程中,人類的注視通常停留在車輛前方的道路上,因為這是車輛行駛的地方。但是,這還不夠,因為 SLAM/VO 還需要聚焦在遠離圖像中心的區(qū)域,所以僅僅依靠人眼眼動跟蹤器獲得的凝視數(shù)據(jù),并不能幫助 SLAM 系統(tǒng)捕捉所有這些重要線索。

為解決這一問題,作者通過結(jié)合幾何信息和語義信息,在 KITTI 數(shù)據(jù)集的基礎上,構造一個顯著性數(shù)據(jù)集 Salient-KITTI 來訓練顯著性模型,用語義注視代替人類注視。具體來說,作者首先提取圖像幾何信息如特征點、線和平面等。然后使用語義分割網(wǎng)絡 SDC Net 在感興趣對象周圍生成分割掩碼。

然后,作者選取了 13 個類別作為 SLAM 應該重點關注的對象(紅綠燈、交通標志、道路、建筑物、人行道、停車場、軌道、圍欄、橋梁、電線桿、桿群、植被、地形)來過濾幾何信息,因為這些類別中的區(qū)域通常包含顯著的、穩(wěn)定和魯棒的特征。如下圖,其顯示了語義注視和人類注視地面真值的比較。

6b837662-4fce-11eb-8b86-12bb97331649.png

最后,基于該顯著性數(shù)據(jù)集,作者使用 DI-Net 獲得顯著性模型,并用它來預測初始顯著性圖,隨后根據(jù)圖像的深度信息得到最終的顯著性圖。

為了驗證顯著性模型的可行性,作者做了三個實驗:

a) 1、顯著性模型的有效性驗證。使用分別在 Saleint-KITTI 數(shù)據(jù)集和 SALICON 數(shù)據(jù)集上訓練的顯著性模型,驗證所提出的顯著性模型相對于其它顯著性模型的有效性。

6bb33cd0-4fce-11eb-8b86-12bb97331649.png

圖 | SALICON 和 KITTI 數(shù)據(jù)集訓練的顯著性模型的比較

結(jié)果顯示,對于基于 SALICON 數(shù)據(jù)集訓練的模型,當圖像中沒有顯著對象時,注意力集中在圖像的中心,從而忽略了其他重要信息,即我們所說的存在中心偏差。相反,在 Salient-KITTI 數(shù)據(jù)集上訓練的模型可成功地捕捉到這些重要信息。此外,該模型還可以減少動態(tài)對象的影響,因此具有顯著性值高的點通常是更穩(wěn)定和魯棒的點。

2、基于 KITTI 數(shù)據(jù)集的室外場景驗證。在單目和立體視覺配置中,作者提出的系統(tǒng)比 ORB-SLAM3 更精確,因為 SBA 使顯著特征點充分發(fā)揮其作用。同時,本實驗也證明利用顯著圖可以使算法在姿態(tài)估計方面有更多的優(yōu)勢,具體效果如下圖所示。

6c98bd28-4fce-11eb-8b86-12bb97331649.png

3、基于 EuRoc 數(shù)據(jù)集的室內(nèi)場景驗證。在第三個實驗中,作者將算法與其他最先進的算法進行了比較,如 ORB-SLAM、DSM、DSO、突出 DSO 和 ORB-SLAM3。

6ce2a546-4fce-11eb-8b86-12bb97331649.png

圖 | EuRoc 數(shù)據(jù)集的一些軌跡結(jié)果和地面真實情況

6d5143f2-4fce-11eb-8b86-12bb97331649.png

結(jié)果顯示,在大多數(shù)序列中,作者提出的模型在室內(nèi)和室外環(huán)境下都能很好地工作,同時也比文獻中的最新技術獲得更精確的結(jié)果。

王科表示,該研究不僅僅針對自動駕駛,基于圖像處理的都可以用,它是一個基礎的算法,而非純應用的提升,只不過最初是在自動駕駛平臺做起來的。

而隨著 SLAM 技術的不斷發(fā)展,它們將被應用到越來越多的領域中,小到掃地機器人,大到無人駕駛技術、AR、VR 等,未來將為人類生活帶來極大的便利。

責任編輯:lq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 算法
    +關注

    關注

    23

    文章

    4786

    瀏覽量

    98184
  • SLAM
    +關注

    關注

    24

    文章

    459

    瀏覽量

    33347
  • 機器人視覺
    +關注

    關注

    0

    文章

    57

    瀏覽量

    10604

原文標題:重慶大學研發(fā)定位與建圖技術,可讓機器人視覺更智能

文章出處:【微信號:deeptechchina,微信公眾號:deeptechchina】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    激光雷達助力泳池水下機器人+定位全覆蓋

    激光雷達助力泳池水下機器人+定位全覆蓋
    的頭像 發(fā)表于 02-25 14:24 ?249次閱讀
    激光雷達助力泳池水下<b class='flag-5'>機器人</b><b class='flag-5'>建</b><b class='flag-5'>圖</b>+<b class='flag-5'>定位</b>全覆蓋

    瞻芯電子G2 650V SiC MOSFET的驗證試驗

    瞻芯電子(IVCT)基于經(jīng)典壽命模型,對大樣本量的第二代(G2)650V SiC MOSFET 進行了驗證試驗(Robustness-Validation)。該試驗嚴格遵循AEC-Q101
    的頭像 發(fā)表于 12-18 16:35 ?6560次閱讀
    瞻芯電子G2 650V SiC MOSFET的<b class='flag-5'>魯</b><b class='flag-5'>棒</b><b class='flag-5'>性</b>驗證試驗

    如何確保電能質(zhì)量在線監(jiān)測裝置運行日志的準確性?

    電能質(zhì)量在線監(jiān)測裝置運行日志的準確性直接影響故障溯源、合規(guī)審計和運維決策,需從 “數(shù)據(jù)采集源頭、記錄過程、存儲傳輸、校驗維護、管理流程” 五大維度構建閉環(huán)保障體系,結(jié)合技術手段與行業(yè)標準,實現(xiàn)日志
    的頭像 發(fā)表于 12-17 11:08 ?601次閱讀
    如何確保電能質(zhì)量在線監(jiān)測裝置運行日志的<b class='flag-5'>準確性</b>?

    確保X光設備檢測的有效準確性的關鍵技巧

    在工業(yè)和安全領域,X光設備檢測已成為不可或缺的重要環(huán)節(jié)。然而,許多用戶常常面臨檢測效果不理想、準確性不足的問題,影響生產(chǎn)效率和安全保障。如何確保X光檢測設備能夠發(fā)揮最大效能,準確捕捉目標信息,是當前
    的頭像 發(fā)表于 11-18 11:27 ?432次閱讀

    電能質(zhì)量在線監(jiān)測裝置的精度等級對其測量結(jié)果的準確性有何影響?

    電能質(zhì)量在線監(jiān)測裝置的精度等級是衡量其測量結(jié)果準確性的 核心量化指標 ,直接決定了測量值與 “真實值” 的偏差范圍。精度等級越高(如 A 級),誤差限值越嚴格,測量結(jié)果的準確性越高;反之(如 B/C
    的頭像 發(fā)表于 09-26 17:40 ?1408次閱讀

    怎樣提高電能質(zhì)量在線監(jiān)測裝置定位諧波源的準確性?

    提高電能質(zhì)量在線監(jiān)測裝置定位諧波源的準確性,需圍繞 “ 優(yōu)化監(jiān)測基礎條件→升級核心技術能力→適配電網(wǎng)動態(tài)工況→強化數(shù)據(jù)質(zhì)量管控 ” 四大維度,針對 “測點布局、同步精度、算法適配、干擾抑制” 等關鍵
    的頭像 發(fā)表于 09-26 15:24 ?679次閱讀

    電能質(zhì)量在線監(jiān)測裝置定位諧波源的準確性有多高?

    電能質(zhì)量在線監(jiān)測裝置定位諧波源的準確性 沒有固定數(shù)值 ,而是受 “ 監(jiān)測網(wǎng)絡設計、技術參數(shù)精度、算法適配、電網(wǎng)工況復雜 ” 四大核心因素影響,呈現(xiàn) “ 場景化差異 ”—— 在理想條
    的頭像 發(fā)表于 09-26 15:20 ?632次閱讀

    如何保障電能質(zhì)量監(jiān)測裝置的準確性?

    保障電能質(zhì)量監(jiān)測裝置(以下簡稱 “裝置”)的準確性,需貫穿其 “ 選型→安裝→運行維護→校準→報廢 ” 全生命周期,核心是通過 “ 源頭把控硬件精度、過程規(guī)避干擾與退化、定期驗證與修正 ”,確保裝置
    的頭像 發(fā)表于 09-23 16:03 ?947次閱讀

    如何保證數(shù)據(jù)校驗系統(tǒng)的時間同步以提高準確性

    在電能質(zhì)量監(jiān)測的數(shù)據(jù)校驗系統(tǒng)中, 時間同步的準確性直接決定了多監(jiān)測點數(shù)據(jù)的時空一致、暫態(tài)事件的時序匹配度,以及校驗結(jié)果的可信度 。要保證時間同步以提升數(shù)據(jù)校驗準確性,需從 “協(xié)議選擇、硬件保障
    的頭像 發(fā)表于 09-19 11:28 ?705次閱讀

    如何確保電能質(zhì)量在線監(jiān)測裝置的數(shù)據(jù)校驗的準確性?

    確保電能質(zhì)量在線監(jiān)測裝置(以下簡稱 “監(jiān)測裝置”)數(shù)據(jù)校驗的準確性,需圍繞 “ 標準溯源、流程規(guī)范、環(huán)境控制、數(shù)據(jù)審核、全周期追溯 ” 五大核心環(huán)節(jié),建立全鏈條管控機制,覆蓋校驗前準備、校驗過程執(zhí)行
    的頭像 發(fā)表于 09-18 11:05 ?650次閱讀
    如何確保電能質(zhì)量在線監(jiān)測裝置的數(shù)據(jù)校驗的<b class='flag-5'>準確性</b>?

    如何使用運行數(shù)據(jù)趨勢分析驗證裝置準確性?

    利用運行數(shù)據(jù)趨勢分析驗證電能質(zhì)量在線監(jiān)測裝置準確性,核心邏輯是 通過長期采集的電網(wǎng)運行數(shù)據(jù),判斷其趨勢是否符合電網(wǎng)實際規(guī)律、是否具備穩(wěn)定性與一致 —— 若裝置準確,其輸出的數(shù)據(jù)趨勢應與電網(wǎng)工況(如
    的頭像 發(fā)表于 09-18 10:33 ?529次閱讀
    如何使用運行數(shù)據(jù)趨勢分析驗證裝置<b class='flag-5'>準確性</b>?

    渝能源家禽智能飼喂機器人無線充電方案,突破傳統(tǒng)充電束縛

    渝能源科技推出禽養(yǎng)殖機器人無線充電解決方案,解決家禽養(yǎng)殖機器人充電難題,提升效率與可靠。
    的頭像 發(fā)表于 08-27 17:34 ?743次閱讀

    測縫計測量數(shù)據(jù)的準確性和校準方法解析

    在結(jié)構物安全監(jiān)測領域,數(shù)據(jù)準確性是評估工程健康狀態(tài)的核心依據(jù)。振弦式測縫計作為主流裂縫監(jiān)測設備,其測量精度直接影響裂縫發(fā)展趨勢的判斷。那么如何確保測縫計測量數(shù)據(jù)的準確性以及如何校準?下面是南京峟思給
    的頭像 發(fā)表于 07-07 13:56 ?710次閱讀
    測縫計測量數(shù)據(jù)的<b class='flag-5'>準確性</b>和校準方法解析

    必知!影響手機氣密檢測準確性的重要因素

    移動設備防水防塵技術升級,手機氣密檢測成保障產(chǎn)品可靠的關鍵。但檢測準確性受設備精度、環(huán)境穩(wěn)定性、操作規(guī)范性及手機結(jié)構設計局限等因素干擾,影響測試結(jié)果、產(chǎn)品良品率和用戶體驗。影響手機氣密
    的頭像 發(fā)表于 07-04 14:26 ?963次閱讀
    必知!影響手機氣密<b class='flag-5'>性</b>檢測<b class='flag-5'>準確性</b>的重要因素

    【「# ROS 2智能機器人開發(fā)實踐」閱讀體驗】視覺實現(xiàn)的基礎算法的應用

    相機標定是視覺系統(tǒng)的基石,直接影響后續(xù)圖像處理的精度。書中詳細介紹了單目和雙目相機的標定流程,包括標定板的使用、參數(shù)優(yōu)化以及標定文件的應用。 實際應用中,標定誤差可能導致機器人定位偏差,因此標定過程
    發(fā)表于 05-03 19:41