91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

自動駕駛邁向3.0時代!車企爭搶城市無圖NOA,大模型端到端方案加速迭代

Monika觀察 ? 來源:電子發(fā)燒友 ? 作者:莫婷婷 ? 2024-06-08 00:06 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網報道(文/莫婷婷)汽車智能化推動了“軟件定義汽車”,自動駕駛也同步進入了由軟件驅動的2.0時代。發(fā)展至今,自動駕駛市場開始邁進3.0時代。那么,什么是自動駕駛3.0時代,在2.0時代向3.0時代的過渡階段,大模型又有哪些需求?

自動駕駛由2.0時代邁向3.0時代

回顧自動駕駛的發(fā)展,可以將其總結為三個發(fā)展階段,由硬件驅動轉向軟件驅動,如今轉向數據驅動,也就是業(yè)內所說的自動駕駛3.0時代。在硬件驅動的1.0時代,由激光雷達負責感知,到了軟件驅動的2.0時代,感知由傳感器單獨輸出結果,應用了部分小模型,數據量較少。如今在3.0時代,感知由多模態(tài)傳感器聯合輸出結果,數據的需求量越來越大,應用了越來越多的大模型。

毫無疑問,大模型正在重塑汽車智能化技術路線,當前進入了自動駕駛2.0時代向3.0時代的技術架構演進的關鍵階段。毫末智行認為,在這個過程中,越來越多的分模塊出現集中化、模型化,也就是由多個模塊變成一個模型,由多個模型變成一個模型,最后會匯聚到這種端到端的大模型,通過端到端的大模型在車上或者在云上完成智能駕駛任務。

當前,有多家廠商發(fā)布了應用在汽車領域的大模型及其解決方案,例如毫末智行基于自身對技術發(fā)展的預判,發(fā)布了Drive GPT大模型,商湯絕影則發(fā)布了端到端自動駕駛解決方案UniAD等。

不同的企業(yè)對自動駕駛任務的定義是不同的。毫末智行將自動駕駛任務分成了兩個階段,一個是感知階段,另一個是認知階段。Drive GPT大模型在感知階段進行傳感器的多模態(tài)視覺融合,完成感知后,認知大模型再進行理解,認知模型除了輸入自動駕駛所需要的目的地、導航信息,還可以用基礎大語言模型,對駕駛環(huán)境做理解,從而對駕駛的策略進行預測。商湯絕影智能駕駛產品總監(jiān)趙祥磊表示,Drive GPT還加入了圖片、文字等多模態(tài)模型,能夠更加高效、立體地理解、感知周圍的環(huán)境。

要知道,智能汽車在駕駛過程中面臨很多復雜的場景,例如能否根據道路的環(huán)境控制車速,讓行駛更安全。因此大模型需要更精準地完成檢測工作,這也就需要通過大量數據的訓練。
在云端完成感知大模型和認知大模型的能力提升之后,如何將其賦能至車端,是下一個階段需要突破的難題。


自動駕駛解決方案走向真端到端,由兩段式到一段式

目前,大模型上車已經迎來一定進展,并且隨著技術的成熟,NOA功能從高速NOA,卷向城市NOA,再到城市無圖NOA。2024年,正是城市無圖NOA落地的關鍵節(jié)點。

“圖”指的是高精度地圖,有圖意味著需要高精度地圖提供交通標志、紅綠燈等道路信息,并且要精確到厘米,讓車輛進行更加有效的路線規(guī)劃和智駕行為。但高精度地圖存在制作成本高、需要及時更新地圖信息、信息采集法規(guī)嚴格等問題。因此,城市無圖NOA已經成為下一階段的技術需求。更重要的是,城市無圖NOA還是大模型是否真的支持端到端的標志之一,這也是為什么在現階段大模型廠商經常提及“端到端”的原因。

在車企中,智己汽車發(fā)布的 D.L.P.(深度學習算法人工智能模型,DDLD+DDOD融合感知大模型也已上車智己L6。智己汽車表示智己L6 Max全系具備無圖城市NOA能力。計劃在第一季度在上海地區(qū)率先推送城市NOA,第二季度開啟無圖城市NOA公測,第三季度量產無圖城市NOA,第四季度實現全國都可開無圖城市NOA。

10 年前的 ADAS 功能主要是識別車輛、行人和車道線,讓汽車居中行駛。隨著技術迭代,增加了響應紅綠燈的功能,再接下來,ADAS功能還需要識別更多復雜的道路信息,例如路上的施工區(qū)域,讓汽車能夠繞過障礙物更安全行駛。

商湯絕影智能駕駛產品線總監(jiān)趙祥磊提及,后面我們發(fā)現它要的并不是找一個可通行的空間,而是要去理解這是一個施工的場景,可能需要去左轉、右轉甚至掉頭,這也是我們的理解,我們認為最終的端到端方案,它可能并不是一個感知和決策規(guī)劃兩段式的方案,真端到端應該是一段式的,這樣的話它的性能的天花板才會更高。

商湯絕影認為由感知和決策兩個模型組成的 “兩段式”架構的端到端方案比較容易落地,但存在性能上限瓶頸,因為中間信息的傳遞主要是人為的,會出現信息傳遞過濾或丟失的問題。

因此商湯絕影推出UniAD解決方案,公司表示這是真端到端的解決方案,實現了感知決策一體化。具備兩大優(yōu)勢,一是性能上限更高,應對非結構化無圖道路和多交通參與者交互等復雜能力更強;二是迭代速度更快,針對復雜道路場景,相比于基于規(guī)則方案,開發(fā)效率提高數倍。目前已經完成實車部署開始路測。

商湯絕影采用了數據驅動、大模型驅動讓UniAD更高效地響應復雜道路場景。但是商湯絕影發(fā)現,當隨著時間周期越來越長,corner case出現概率也在降低,基于車輛采集的數據綜合效率逐漸降低。此時需要尋找新的數據驅動引擎。而AIGC的出現恰好能解決一部分問題,大模型能夠生成交通事故等長尾場景的數據,再進行訓練。

在毫末智行的自動駕駛技術路線中,也規(guī)劃了將在今年實現通用感知+通用認知,以及端到端訓練,打造感知+認知端到端。

當然,端到端的模型開發(fā)、基于大模型的數據生成,都是需要算力基礎設施作為支撐。算力基礎設備的算力規(guī)?;蛟S會成為下一階段大模型廠商的競爭優(yōu)勢。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯系本站處理。 舉報投訴
  • 自動駕駛
    +關注

    關注

    793

    文章

    14879

    瀏覽量

    179784
  • 大模型
    +關注

    關注

    2

    文章

    3648

    瀏覽量

    5179
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    模型時代自動駕駛標注有什么特殊要求?

    自動駕駛的發(fā)展歷程中,數據標注一直被視為算法進化的基石。然而,隨著大模型時代的到來,這一領域正經歷著重構。 過去,標注員的任務是簡單地在二維照片上畫框,標記出車輛和行人的位置。但現在,為了支撐復雜
    的頭像 發(fā)表于 03-01 09:09 ?2190次閱讀
    大<b class='flag-5'>模型</b><b class='flag-5'>時代</b><b class='flag-5'>自動駕駛</b>標注有什么特殊要求?

    自動駕駛為什么會出現黑盒現象?

    自動駕駛領域,(End-to-End)是指從感知環(huán)境的原始數據車輛實際控制指令,全部交給一個統(tǒng)一的深度學習
    的頭像 發(fā)表于 02-20 09:25 ?9232次閱讀
    <b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>為什么會出現黑盒現象?

    行業(yè)首個基于地平線單征程6M芯片的城市NOA方案正式交付上車

    2025年1月21日,理想AD Pro 4.0推送,行業(yè)首個基于地平線單征程6M芯片的城市NOA
    的頭像 發(fā)表于 01-24 11:03 ?446次閱讀

    如何訓練好自動駕駛模型

    [首發(fā)于智駕最前沿微信公眾號]最近有位小伙伴在后臺留言提問:算法是怎樣訓練的?是模仿學習、強化學習和離線強化學習這三類嗎?其實
    的頭像 發(fā)表于 12-08 16:31 ?1427次閱讀
    如何訓練好<b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>模型</b>?

    模型中常提的快慢思考會對自動駕駛產生什么影響?

    提出的“快慢系統(tǒng)”理論啟發(fā),旨在讓自動駕駛系統(tǒng)模擬人類的思考與決策過程。理想汽車結合與VLM模型,推出了業(yè)界首個在車
    的頭像 發(fā)表于 11-22 10:59 ?2499次閱讀
    大<b class='flag-5'>模型</b>中常提的快慢思考會對<b class='flag-5'>自動駕駛</b>產生什么影響?

    西井科技自動駕駛模型獲得國際認可

    近日,西井科技AI創(chuàng)研團隊在國際權威自動駕駛算法榜單NAVSIM v2中脫穎而出,憑借創(chuàng)新的自動駕駛
    的頭像 發(fā)表于 10-15 17:20 ?1279次閱讀

    自動駕駛模型為什么會有不確定性?

    。為了能讓自動駕駛汽車做出正確、安全且符合邏輯的行駛動作,模型被提了出來。
    的頭像 發(fā)表于 09-28 09:20 ?867次閱讀
    <b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大<b class='flag-5'>模型</b>為什么會有不確定性?

    為什么自動駕駛模型有黑盒特性?

    [首發(fā)于智駕最前沿微信公眾號]隨著自動駕駛技術落地,(End-to-End)大模型也成為行業(yè)研究與應用的熱門方向。相較于傳統(tǒng)
    的頭像 發(fā)表于 07-04 16:50 ?881次閱讀
    為什么<b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大<b class='flag-5'>模型</b>有黑盒特性?

    數據標注方案自動駕駛領域的應用優(yōu)勢

    10-20TB,其中需要標注的數據占比超過60%。在這樣的背景下,數據標注方案應運而生,正在重塑自動駕駛的數據生產范式。
    的頭像 發(fā)表于 06-23 17:27 ?998次閱讀

    為什么城市NOA離不開激光雷達?

    [首發(fā)于智駕最前沿微信公眾號]隨著各車在智能駕駛領域的競爭不斷加強,越來越多新技術在汽車上得以搭載,城市NOA作為體現智能駕駛應用最為普遍
    的頭像 發(fā)表于 05-28 09:13 ?973次閱讀
    為什么<b class='flag-5'>城市</b><b class='flag-5'>NOA</b>離不開激光雷達?

    新能源軟件單元測試深度解析:自動駕駛系統(tǒng)視角

    焦點是否落在目標物體上。某自動駕駛公司借此發(fā)現模型在夜間過度關注路燈而非行人。 ? 實時性保障: ?時間感知測試框架(TAF)注入時間戳探針,監(jiān)控函數執(zhí)行耗時。例如,某路徑規(guī)劃算法因內存泄漏導致響應
    發(fā)表于 05-12 15:59

    一文帶你厘清自動駕駛架構差異

    [首發(fā)于智駕最前沿微信公眾號]隨著自動駕駛技術飛速發(fā)展,智能駕駛系統(tǒng)的設計思路也經歷了從傳統(tǒng)模塊化架構
    的頭像 發(fā)表于 05-08 09:07 ?1028次閱讀
    一文帶你厘清<b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>架構差異

    自動駕駛中基于規(guī)則的決策和模型有何區(qū)別?

    自動駕駛架構的選擇上,也經歷了從感知、決策控制、執(zhí)行的三段式架構到現在火熱的模型,尤其是在2024年特斯拉推出FSD V12后,各
    的頭像 發(fā)表于 04-13 09:38 ?3732次閱讀
    <b class='flag-5'>自動駕駛</b>中基于規(guī)則的決策和<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大<b class='flag-5'>模型</b>有何區(qū)別?

    自動駕駛中常提的“NOA”是個啥?

    近年來,自動駕駛技術發(fā)展迅速,業(yè)界不斷探索如何在復雜交通場景中實現真正的無人駕駛。城市NOA作為自動駕駛的一項前沿技術,正成為各大廠商相互爭
    的頭像 發(fā)表于 04-09 09:03 ?3069次閱讀
    <b class='flag-5'>自動駕駛</b>中常提的“<b class='flag-5'>NOA</b>”是個啥?

    NVIDIA Halos自動駕駛汽車安全系統(tǒng)發(fā)布

    NVIDIA 整合了從云端的安全自動駕駛開發(fā)技術套件,涵蓋車輛架構 AI 模型,包括芯片
    的頭像 發(fā)表于 03-25 14:51 ?1173次閱讀