導(dǎo)語

人形機(jī)器人、移動(dòng)機(jī)器人和自主決策系統(tǒng)正逐漸從實(shí)驗(yàn)室走向工廠車間、倉(cāng)庫(kù)和公共區(qū)域。為了在這些環(huán)境中可靠地運(yùn)行，機(jī)器人需要具備能夠?qū)崟r(shí)處理多種傳感器的高性能感知處理管道。NVIDIA Jetson AGX Thor提供了滿足此類需求所需的邊緣計(jì)算能力，而友思特深度合作伙伴Stereolabs則將ZED空間感知視覺技術(shù)引入該平臺(tái)，為現(xiàn)實(shí)世界的機(jī)器人應(yīng)用提供了一套完整的解決方案。

Jetson Thor與ZED相機(jī)的融合通過ZED SDK 5.1版本推出，該版本已于本季度正式對(duì)外發(fā)布！

從 AGX Orin 到 Thor:極致性能釋放，解鎖全新工作負(fù)載

Jetson AGX Thor配備了一款由Blackwell架構(gòu)打造的GPU，其性能高達(dá)2070 FP4 TFLOP（1035 FP8 TFLOP），相較于AGX Orin，性能顯著提升

人工智能計(jì)算能力提升 7.5 倍，運(yùn)行更大模型或同時(shí)處理多個(gè)感知任務(wù)負(fù)載

每瓦性能提升約 4 倍 AI TFLOPs，從而能夠?qū)崿F(xiàn)更高效的多傳感器處理，同時(shí)不增加功耗。

搭載2.6 倍速 Arm Neoverse 處理器的 CPU，擁有 14 個(gè)核心，可顯著提升預(yù)處理及整體系統(tǒng)調(diào)度的速度。

數(shù)據(jù)處理速度大幅提升，得益于新增的 256 位 128 GB LPDDR5X 內(nèi)存，其帶寬高達(dá) 273 GB/s

四個(gè) 25?GbE 接口，支持高帶寬傳感器數(shù)據(jù)采集與實(shí)時(shí)數(shù)據(jù)融合。

雙視頻引擎，可處理多達(dá) 4 倍數(shù)量的 1080p30 H.265 流數(shù)據(jù)，非常適合多攝像頭設(shè)置環(huán)境。

Jetson Thor模塊由基于 Ubuntu 24.04 的新 Jetpack SDK 7 提供動(dòng)力，該版本引入了全新的 CUDA 13 和 TensorRT 10。

依托以上全方位的性能升級(jí)，工程師可在單模塊部署先進(jìn)的感知流程，助力機(jī)器人實(shí)現(xiàn)多傳感器并發(fā)處理、實(shí)時(shí)響應(yīng)決策，在真實(shí)場(chǎng)景中達(dá)成更智能的自主運(yùn)行。

ZED相機(jī)：如何充分利用Thor的優(yōu)勢(shì)

（ZED 2i 通過 Thor Dev Kit 在 ZED Explorer 上進(jìn)行實(shí)時(shí)流媒體傳輸）

將友思特合作伙伴Stereolabs的ZED相機(jī)與Jetson AGX Thor相融合，可打造一套面向機(jī)器人技術(shù)的完整感知架構(gòu)。這套系統(tǒng)不僅能對(duì)深度信息、運(yùn)動(dòng)追蹤與物體識(shí)別功能實(shí)現(xiàn)實(shí)時(shí)處理，還可并行運(yùn)行多條任務(wù)流水線，同時(shí)為規(guī)劃與控制類任務(wù)預(yù)留充足的計(jì)算余量。

實(shí)現(xiàn)這一效能的核心助力，正是 NVIDIA 的多實(shí)例GPU（MIG）技術(shù)。該技術(shù)可將單塊 GPU 拆分為多個(gè)獨(dú)立實(shí)例，讓感知、建圖與規(guī)劃類工作負(fù)載得以獨(dú)立并行運(yùn)轉(zhuǎn)。借助為各項(xiàng)任務(wù)分配專屬的計(jì)算資源與內(nèi)存空間，MIG 技術(shù)能夠有效避免不同工作負(fù)載之間的相互干擾，助力系統(tǒng)在嚴(yán)苛工況下始終保持穩(wěn)定的性能表現(xiàn)。

此外，該平臺(tái)搭載的高帶寬內(nèi)存與 25?GbE 高速接口，可大幅簡(jiǎn)化多攝像頭數(shù)據(jù)采集與傳感器融合的流程，確保海量傳感器數(shù)據(jù)得到高效處理。與之相輔相成的是Holoscan 的傳感器直連 GPU 通道技術(shù)，該技術(shù)讓數(shù)據(jù)全程留存于 GPU 內(nèi)部完成處理，無需經(jīng)由 CPU 中轉(zhuǎn)傳輸，有效降低了數(shù)據(jù)處理延遲。

Jetson AGX Thor 開發(fā)套件可原生兼容 Stereolabs 旗下的 USB 接口相機(jī)，其中涵蓋ZED 2i與ZED Mini型號(hào)。而ZED X系列產(chǎn)品的完整 GMSL2 連接功能，將依托我們合作伙伴的解決方案落地實(shí)現(xiàn)。

ZED 相機(jī)與 Jetson AGX Thor 的結(jié)合：在實(shí)際應(yīng)用場(chǎng)景中的意義

制造業(yè)：機(jī)器人可在同一模塊內(nèi)處理檢查、揀選物品及保障工人安全等工作。憑借更高的計(jì)算能力和視頻傳輸能力，它們能夠保持精確性和響應(yīng)性，從而在不影響效率的情況下提升生產(chǎn)效能。

人形機(jī)器人：這一領(lǐng)域的項(xiàng)目需要同時(shí)具備運(yùn)動(dòng)、識(shí)別和操作方面的能力。ZED深度技術(shù)與Thor的MIG分區(qū)技術(shù)使這些流程得以并行運(yùn)行，從而確保了安全、自然的協(xié)作。

物流與倉(cāng)儲(chǔ)：AMR（自主移動(dòng)機(jī)器人）和叉車擁有了覆蓋廣闊區(qū)域的3D 視覺功能，從而能夠進(jìn)行通道導(dǎo)航、托盤搬運(yùn)以及碼頭作業(yè)。Thor 的卓越效率使得車隊(duì)能夠隨著規(guī)模的擴(kuò)大而增加攝像頭數(shù)量，同時(shí)保持地圖繪制和障礙物規(guī)避功能的響應(yīng)性。

智能設(shè)施與基礎(chǔ)設(shè)施：安全區(qū)域、流量分析及資產(chǎn)追蹤等功能可被整合至單一系統(tǒng)中，從而減少大型場(chǎng)所內(nèi)硬件設(shè)備的分散狀況。

展望未來：解鎖邊緣感知無限可能

如果您計(jì)劃在制造業(yè)、物流倉(cāng)儲(chǔ)或各類大型工業(yè)設(shè)施領(lǐng)域，搭建一套以 Jetson AGX Thor 為核心算力基底的智能應(yīng)用平臺(tái)，那么友思特合作伙伴 Stereolabs 的 ZED 系列相機(jī)，將憑借領(lǐng)先的空間視覺技術(shù)，為您部署可穩(wěn)定執(zhí)行各類實(shí)際作業(yè)任務(wù)的機(jī)器人，筑牢感知層面的核心技術(shù)支撐與性能保障。

審核編輯 黃宇