機器人系統(tǒng)越來越依賴視覺進行感知并與環(huán)境交互,因而對高速、低延遲數(shù)據(jù)鏈路的需求日益增長。千兆多媒體串行鏈路(GMSLTM)通過單條線纜即可實現(xiàn)視頻、控制信號和電力的傳輸,具備高可靠性,是一種極有潛力的解決方案。本文探討了攝像頭在機器人中的應(yīng)用,分析了攝像頭所面臨的連接挑戰(zhàn),并闡述了GMSL如何助力實現(xiàn)可擴展、穩(wěn)健、高性能的機器人平臺。
機器人系統(tǒng)越來越依賴先進的機器視覺來感知、導(dǎo)航和與環(huán)境交互。隨著攝像頭數(shù)量的增加和分辨率的提升,業(yè)界對能夠傳輸和聚合處理實時視頻數(shù)據(jù)的高速、低延遲鏈路的需求變得空前強烈。
最初為汽車應(yīng)用開發(fā)的千兆多媒體串行鏈路(GMSL),正成為適合機器人系統(tǒng)的強大而高效的解決方案。GMSL通過單根線纜同時傳輸高速視頻數(shù)據(jù)、雙向控制信號和電力,具備長距離傳輸能力、確定性的微秒級延遲和極低的誤碼率(BER)等優(yōu)勢。它簡化了線束,縮小了整體解決方案尺寸,非常適合應(yīng)用于在動態(tài)且通常惡劣的環(huán)境中運行的視覺主導(dǎo)型機器人。
在以下篇幅中,我們將討論攝像頭在機器人中的部署位置和應(yīng)用場景,以及這些應(yīng)用場景所面臨的對數(shù)據(jù)和連接的挑戰(zhàn),并闡述GMSL如何幫助系統(tǒng)設(shè)計師構(gòu)建可擴展、可靠、高性能的機器人平臺。
攝像頭在機器人中的應(yīng)用
作為現(xiàn)代機器人感知系統(tǒng)的核心部件,攝像頭賦予機器實時認知和響應(yīng)周圍環(huán)境的能力。無論是穿梭于倉庫通道的搬運機器人、分揀包裹的機械臂,還是與人類互動的服務(wù)型機器人,視覺系統(tǒng)對于自主運行、自動化操作及人機交互都至關(guān)重要。攝像頭不僅功能多樣,形式也各異。根據(jù)任務(wù)的不同,攝像頭被安裝在機器人的不同部位,并需定制以適配平臺的物理和操作約束(見圖1)。

圖1. 由GMSL賦能的多模態(tài)機器人視覺系統(tǒng)示例
自主化
在自主機器人中,攝像頭充當機器人的“眼睛”,使機器人能夠感知周圍環(huán)境、避開障礙物,并確定自身在環(huán)境中的位置。對于移動機器人,例如送貨機器人、倉庫穿梭車或農(nóng)業(yè)巡檢車,通常會在機器人的邊角或邊緣放置多個廣角攝像頭。此類環(huán)視系統(tǒng)提供360°感知能力,幫助機器人在復(fù)雜空間中導(dǎo)航,避免碰撞。
其他與自主運行相關(guān)的應(yīng)用利用朝下或朝上的攝像頭,讀取地面、天花板或墻壁上的基準標記。這些標記起到視覺指引的作用,使機器人在工廠或醫(yī)院等結(jié)構(gòu)化環(huán)境中穿行時,能夠重新校準位置或觸發(fā)特定動作。在更先進的系統(tǒng)中,機器人的正面或側(cè)面會放置立體視覺攝像頭或飛行時間(ToF)攝像頭,用于生成三維地圖、估算距離,并幫助進行同步定位與地圖繪制(SLAM)。
此類攝像頭的位置通常由機器人的大小、機動能力和所需的視場決定。例如,在小型人行道送貨機器人上,攝像頭可能會隱藏在四個側(cè)面的凹陷面板中。無人機上通常裝有前向攝像頭用于導(dǎo)航,還有下向攝像頭用于降落或目標追蹤。
自動化
在工業(yè)自動化中,視覺系統(tǒng)幫助機器人快速且穩(wěn)定地執(zhí)行重復(fù)性或高精度的任務(wù)。在這類應(yīng)用中,攝像頭可能安裝在機器臂上,靠近夾具或末端執(zhí)行器,使系統(tǒng)得以精準地對物體進行視覺檢查、定位及操作。這對于貼片作業(yè)尤其重要,因為準確識別器件或封裝的位置與方向是確保操作成功的關(guān)鍵。
有時候,攝像頭固定在工作區(qū)域上方,例如安裝在龍門架或架空軌道上,用以監(jiān)控傳送帶上的物品或掃描條形碼。在倉庫環(huán)境中,移動機器人使用前向攝像頭檢測貨架標簽、標志或二維碼,從而實現(xiàn)動態(tài)任務(wù)分配或路線變更。
某些檢查機器人,特別是基礎(chǔ)設(shè)施、公用事業(yè)或重工業(yè)中使用的機器人,其伸縮桿或關(guān)節(jié)臂上會安裝變焦攝像頭。通過這些攝像頭,機器人能夠拍攝焊縫、線纜橋架或管道接頭的高清圖像。這些任務(wù)若由人工手動完成,不僅危險,而且耗時。
人機交互
攝像頭在機器人與人類的交互中也發(fā)揮著核心作用。在協(xié)作制造、醫(yī)療健康或服務(wù)行業(yè)中,機器人需要理解手勢、識別人臉,并保持一定的社交存在感。視覺系統(tǒng)使這一切成為可能。
人形機器人和服務(wù)機器人通常在其頭部或胸部嵌入攝像頭,藉此模擬人類的視線,從而實現(xiàn)更自然的人機交互。這些攝像頭幫助機器人解讀面部表情,保持眼神交流,或跟隨目標人物的目光。某些系統(tǒng)使用深度攝像頭或魚眼鏡頭來跟蹤身體運動,或檢測是否有人進入共享工作空間。
在協(xié)作機器人(cobot)場景中,人類和機器并肩工作,機器視覺用于確保操作安全和提升響應(yīng)速度。機器人能夠觀察到靠近的肢體或工具,通過調(diào)整自身行為來避免碰撞,或在有人靠得太近時暫停作業(yè)。
即使在遠程操作或半自主系統(tǒng)中,機器視覺依然至關(guān)重要。前置攝像頭將實時視頻流傳輸給遠程操作員,從而支持實時控制或檢查。這些視頻流可疊加顯示增強現(xiàn)實信息,協(xié)助進行遠程診斷或培訓(xùn)等任務(wù)。
在所有這些領(lǐng)域中,攝像頭的安裝位置(例如機器人的夾持器、云臺、底座或頭部)都是一項重要設(shè)計決策,取決于機器人的功能、形狀和環(huán)境。隨著機器人系統(tǒng)不斷增強能力和自主性,視覺的作用將愈發(fā)重要,攝像頭的集成也會變得更加復(fù)雜且不可或缺。
機器人視覺挑戰(zhàn)
在視覺系統(tǒng)成為機器人智能重要支柱的同時,機遇與復(fù)雜性也在增長。高性能攝像頭解鎖了實時感知、精準操控和更安全人機交互等強大的能力,但也對系統(tǒng)架構(gòu)提出了更高要求。問題不再只是如何高效傳輸大量視頻數(shù)據(jù)。如今,許多機器人需要在極短時間內(nèi)基于多模態(tài)傳感器輸入做出決策。與此同時,它們必須在緊湊的機械空間內(nèi)運行,合理管理功耗,避免電磁干擾(EMI),并在靠近人類的環(huán)境中嚴格確保功能安全。
機器人所處的環(huán)境進一步加劇了這些挑戰(zhàn)。倉庫機器人可能頻繁進出冷庫,承受劇烈溫度波動和冷凝的考驗。農(nóng)業(yè)巡檢車可能在未鋪裝的田野間爬行,持續(xù)承受振動和機械沖擊。醫(yī)院或公共場所的服務(wù)機器人可能會遇到陌生且視覺復(fù)雜的環(huán)境,必須要能夠迅速適應(yīng),確保安全地繞過人和障礙物。
利用GMSL解決挑戰(zhàn)
GMSL具備獨特的優(yōu)勢,能夠滿足現(xiàn)代機器人系統(tǒng)的需求。憑借高帶寬、穩(wěn)健性和靈活的集成能力,GMSL非常適合動態(tài)、任務(wù)關(guān)鍵環(huán)境中運行的傳感器密集型平臺。以下特性凸顯了GMSL應(yīng)對機器人領(lǐng)域視覺相關(guān)關(guān)鍵挑戰(zhàn)的能力。
高數(shù)據(jù)速率和低延遲
GMSL2和GMSL3產(chǎn)品系列支持3 Gbps、6 Gbps和12 Gbps的前向通道 (視頻路徑)數(shù)據(jù)速率,覆蓋了絕大部分機器人視覺的應(yīng)用場景。靈活的鏈路速率使系統(tǒng)設(shè)計師能夠針對分辨率、幀率、傳感器類型和處理要求進行優(yōu)化(圖2)。
對于大多數(shù)采用200-300萬像素卷簾快門傳感器并以60幀每秒(FPS)幀率運行的環(huán)視攝像頭,3Gbps速率的GMSL鏈路足矣。3Gbps的GMSL鏈路也支持其他常見的檢測模式,比如ToF傳感器,帶有點云輸出的光檢測與測距(LIDAR)單元和傳輸檢測數(shù)據(jù)或壓縮圖像式回撥的雷達傳感器。
6 Gbps模式通常用于機器人的前向主攝像頭。這類攝像頭需配備更高分辨率的傳感器(通常為800萬像素或更高),以支持目標檢測、語義理解或標志識別等任務(wù)。6 Gbps數(shù)據(jù)速率既支持提供原始輸出的ToF傳感器,也支持立體視覺系統(tǒng),后者從兩個圖像傳感器傳輸原始輸出流,或從集成圖像信號處理器(ISP)輸出處理后的點云流。目前市場上的許多立體攝像頭依賴于6 Gbps數(shù)據(jù)速率來實現(xiàn)高幀率性能。
在高端應(yīng)用場景下,12 Gbps鏈路支持專業(yè)機器人使用的1200萬像素或更高分辨率的攝像頭,滿足高精度目標分類、復(fù)雜場景分割及遠距離感知等先進功能需求。值得注意的是,某些低分辨率的全局快門傳感器也需要更高速度的鏈路,以減少讀出時間,并避免在快速拍攝周期中出現(xiàn)運動偽影,這在動態(tài)或高速環(huán)境中尤為重要。

圖2. 傳感器帶寬范圍和GMSL能力
GMSL采用頻域雙工技術(shù)來分離前向(視頻和控制)與反向(控制)通道,從而實現(xiàn)確定性低延遲雙向通信,并且消除數(shù)據(jù)沖突風險。在所有鏈路速率下,GMSL都能保持極低的延遲:從GMSL串行器的輸入到解串器的輸出,累計的延遲通常在幾十微秒以內(nèi),這對于大多數(shù)實時機器人視覺系統(tǒng)來說可以忽略不計。確定性反向通道延遲使得主機能夠?qū)z像頭進行精準的硬件觸發(fā)。此特性對于多個傳感器同步采集圖像至關(guān)重要,同時也支持復(fù)雜機器人工作流程中時間敏感的事件驅(qū)動型幀觸發(fā)機制。如果用USB或以太網(wǎng)攝像頭要達到這種時序精度,通常需要增加單獨的硬件觸發(fā)線路,導(dǎo)致系統(tǒng)復(fù)雜度和布線工作量加大。
小尺寸和低功耗
GMSL的核心價值之一在于能夠簡化線纜和連接器基座。GMSL本身是一種全雙工鏈路,大多數(shù)GMSL攝像頭會利用同軸線纜供電(PoC)特性,通過一條細同軸線纜同時傳輸視頻數(shù)據(jù)、雙向控制信號和電力。因此,布線工作大大簡化,線纜線束的整體重量顯著減輕,體積更小,緊湊或關(guān)節(jié)式機器人平臺中的機械走線也更便捷(圖3)。
此外,GMSL串行器是一種高度集成的器件,它將視頻接口(如MIPI-CSI)和GMSL PHY整合到單一芯片中。GMSL串行器在6 Gbps模式下的功耗通常在260 mW左右,明顯低于其他技術(shù)在類似數(shù)據(jù)速率下的功耗。所有這些特性帶來的益處包括:電路板面積縮小,熱管理要求降低(通常可省去龐大的散熱器),系統(tǒng)整體效率提升,對于電池供電的機器人而言意義尤為重大。

圖3. 采用MAX96717的典型GMSL攝像頭架構(gòu)
傳感器聚合和視頻數(shù)據(jù)路由
GMSL解串器有多種配置可選,支持一個、兩個或四個輸入鏈路,便于構(gòu)建靈活的傳感器聚合架構(gòu)。設(shè)計人員可將多個攝像頭或傳感器模塊連接到單個處理器,而無需額外的開關(guān)或外部復(fù)用,這在多攝像頭機器人系統(tǒng)中特別有用。
除了多路輸入外,GMSL SERDES還支持一些高級特性,能夠在整個系統(tǒng)中智能地管理和路由數(shù)據(jù)。具體包括:
I2C 和GPIO廣播,用于同步配置多個傳感器和實現(xiàn)幀同步。
I2C地址別名,避免直通模式下I2C地址沖突。
虛擬通道重分配,允許將多個視頻流純凈地映射到片上系統(tǒng) (SoC)內(nèi)部的幀緩沖區(qū)。
視頻流復(fù)制和虛擬通道濾波功能,允許將選定的視頻數(shù)據(jù)傳送到多個SoC。例如,讓同一攝像頭數(shù)據(jù)流同時驅(qū)動自動化和交互處理流程,或支持冗余處理路徑以增強功能安全性。
安全性和可靠性
最初為汽車高級駕駛輔助系統(tǒng)(ADAS)應(yīng)用開發(fā)的GMSL,在安全性、可靠性和穩(wěn)健性不容妥協(xié)的環(huán)境中經(jīng)過了實際檢驗。機器人系統(tǒng),特別是在有人環(huán)境中操作或執(zhí)行關(guān)鍵工業(yè)任務(wù)的系統(tǒng),采用同樣嚴苛的高標準也能受益匪淺。

表1. GMSL與USB和以太網(wǎng)的區(qū)別:機器人視覺中的接口技術(shù)權(quán)衡
大多數(shù)GMSL串行器和解串器可在-40°C到+105°C的溫度范圍內(nèi)穩(wěn)定運行,并內(nèi)置了自適應(yīng)均衡功能,可持續(xù)監(jiān)測并根據(jù)環(huán)境變化調(diào)整收發(fā)器設(shè)置。因此,系統(tǒng)架構(gòu)師可以靈活地設(shè)計機器人,使機器人在極端或波動的溫度條件下仍能可靠運作。
此外,大多數(shù)GMSL器件符合ASIL-B標準,誤碼率(BER)極低。在符合要求的鏈路條件下,GMSL2的典型BER為10-15,而GMSL3憑借強制性前向糾錯(FEC)技術(shù),可將BER降低至10-30。如此出色的數(shù)據(jù)完整性,結(jié)合安全認證機制,大大簡化了系統(tǒng)級別的功能安全集成。
憑借優(yōu)越的穩(wěn)健性,GMSL能夠減少停機時間,降低維護成本,提升用戶對長期系統(tǒng)可靠性的信心,對于工業(yè)和服務(wù)機器人領(lǐng)域具有重要意義。
成熟生態(tài)
得益于在汽車系統(tǒng)中多年的大量應(yīng)用,GMSL已發(fā)展出一個高度成熟的生態(tài),獲得了全球眾多合作伙伴的支持。其中包含一整套解決方案,包括評估用和生產(chǎn)級攝像頭、計算板、線纜、連接器及軟件/驅(qū)動支持,所有產(chǎn)品都在嚴格的實際使用條件下通過了測試和驗證。對于機器人開發(fā)者而言,借助這一成熟生態(tài),可以縮短開發(fā)周期、簡化系統(tǒng)集成,并降低從原型設(shè)計到量產(chǎn)的門檻。
GMSL與傳統(tǒng)機器人視覺連接技術(shù)的比較
近年來,GMSL的應(yīng)用逐漸從汽車行業(yè)擴展至其他領(lǐng)域,為高性能機器人系統(tǒng)的開發(fā)帶來了新的可能性。伴隨著機器人視覺技術(shù)要求的不斷提升,包括更多攝像頭、更高分辨率、更嚴格的同步精度和更惡劣的工作環(huán)境,USB和以太網(wǎng)等傳統(tǒng)接口在帶寬、延遲和集成復(fù)雜度方面常常顯得力不從心。GMSL提供穩(wěn)健、可擴展且可直接投入生產(chǎn)的解決方案,正成為許多先進機器人平臺的首選升級路徑,開始逐步取代USB和以太網(wǎng)。表1圍繞機器人視覺設(shè)計的關(guān)鍵指標,對這三種技術(shù)進行了比較。
結(jié)語
隨著機器人應(yīng)用逐步深入更嚴苛的應(yīng)用環(huán)境,同時應(yīng)用場景也更加多樣化,視覺系統(tǒng)必須持續(xù)演進,以支持更多數(shù)量的傳感器、更大的帶寬并確保性能的確定性。傳統(tǒng)連接解決方案雖然在開發(fā)階段和某些部署場景中依然重要,但它們在延遲、同步和系統(tǒng)集成方面存在不足,限制了可擴展性。GMSL具備高數(shù)據(jù)速率、長距離傳輸能力、集成供電及雙向確定性低延遲等優(yōu)勢,為構(gòu)建可擴展的機器人視覺系統(tǒng)奠定了堅實基礎(chǔ)。通過采用GMSL,設(shè)計人員可以有效縮短從原型設(shè)計到量產(chǎn)的時間,交付更加智能和可靠的機器人,從容應(yīng)對各種實際應(yīng)用的挑戰(zhàn)。
-
機器人
+關(guān)注
關(guān)注
213文章
31066瀏覽量
222139 -
攝像頭
+關(guān)注
關(guān)注
61文章
5090瀏覽量
103101 -
GMSL
+關(guān)注
關(guān)注
2文章
69瀏覽量
16904 -
視覺系統(tǒng)
+關(guān)注
關(guān)注
3文章
377瀏覽量
31828
原文標題:利用GMSL打造高性能機器人視覺
文章出處:【微信號:analog_devices,微信公眾號:analog_devices】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
應(yīng)用機器視覺系統(tǒng)進行導(dǎo)航機器人的設(shè)計
一種基于服務(wù)機器人的視覺系統(tǒng)設(shè)計
這些機器人視覺系統(tǒng)些關(guān)鍵技術(shù),你必須要知道
嵌入式在機器人視覺系統(tǒng)的應(yīng)用
服務(wù)機器人的視覺系統(tǒng)怎么設(shè)計?
四元數(shù)數(shù)控:工業(yè)機器人使用機器視覺系統(tǒng)的原因
未來的機器人3D視覺系統(tǒng)將會發(fā)生什么樣的變化?
工業(yè)機器人與智能視覺系統(tǒng)應(yīng)用實訓(xùn)平臺介紹
ZN-1AI工業(yè)機器人與智能視覺系統(tǒng)應(yīng)用實訓(xùn)平臺介紹
機器人視覺系統(tǒng)研究
機器人視覺系統(tǒng)的介紹及其存在的問題分析
Tripod機器人視覺系統(tǒng)
借助ADI GMSL技術(shù)構(gòu)建機器人視覺系統(tǒng)
評論