91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Nauto的“ADAS+DMS”的融合模型

Astroys ? 來源:Astroys ? 2023-05-30 11:11 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著DMS即將廣泛采用,初創(chuàng)公司Nauto看到了一個(gè)機(jī)會,通過融合艙外和艙內(nèi)攝像頭的數(shù)據(jù),將其AI算法出售給OEM。Nauto是否真的在正確的時(shí)間推出了正確的技術(shù)呢?

許多車廠已經(jīng)在多款車型上采用了ADAS,搭載多個(gè)攝像頭。同時(shí),車廠也在搭載DMS,用攝像頭監(jiān)控車內(nèi)人類駕駛員的行為。

但這兩個(gè)系統(tǒng)從來都不是一起工作的。ADAS和DMS由不同的供應(yīng)商開發(fā),兩個(gè)系統(tǒng)間的數(shù)據(jù)也無法互相關(guān)聯(lián)(雖然說的不是一回事,但我總是能想起小鵬車主下跪刷臉是怎么回事……)。

加州Palo Alto的初創(chuàng)公司Nauto,希望改變這一情況。通過一個(gè)平臺,融合車輛外部和內(nèi)部生成的數(shù)據(jù),Nauto相信它將有助于提升道路與駕駛安全。

Nauto的創(chuàng)始人兼CEO Stefan Heck解釋說,“消費(fèi)者反饋顯示,許多駕駛員對ADAS或DMS經(jīng)常發(fā)出的誤報(bào)感到惱火。這代表行業(yè)還沒有做對這一點(diǎn)。”

數(shù)據(jù)融合

從2015年起,Nauto就一直在用艙內(nèi)攝像頭監(jiān)控商業(yè)車隊(duì)駕駛員的行為。同時(shí),Nauto也一直用艙外攝像頭監(jiān)控道路。這項(xiàng)研究收集了有關(guān)行人、騎自行車的人和其他車輛行為的知識。它捕獲了許多險(xiǎn)些發(fā)生、緊急避險(xiǎn)和高風(fēng)險(xiǎn)事件的場景。

通過結(jié)合艙外和艙內(nèi)攝像頭的數(shù)據(jù),Nauto看到了駕駛員分心行為和道路上實(shí)時(shí)發(fā)生的風(fēng)險(xiǎn)之間的關(guān)聯(lián)。該公司表示,它已經(jīng)分析了“數(shù)十億的數(shù)據(jù)點(diǎn)”,并開發(fā)了“可以預(yù)測、防止和減少高風(fēng)險(xiǎn)事件的算法?!?/p>

800個(gè)車隊(duì)

當(dāng)Heck創(chuàng)立Nauto時(shí),科技行業(yè)對完全自動(dòng)駕駛汽車(AV)充滿了期待。當(dāng)時(shí)人們都在預(yù)測,AV的大量涌現(xiàn)意味著計(jì)算機(jī)駕駛員不僅將取代人類出租車和卡車司機(jī),而且還會使街道更加安全。

與眾不同的是,Heck一直專注于幫助人們更好地駕駛,而不是取代他們。Nauto表示,其原始使命是為期八年,目的是為車隊(duì)駕駛員提供預(yù)防碰撞的能力。

將Nauto與大多數(shù)其他AV初創(chuàng)公司區(qū)分開來的是兩種商業(yè)實(shí)踐:首先,與商業(yè)車隊(duì)服務(wù)運(yùn)營商建立合作關(guān)系;其次,專注于后市場以啟動(dòng)Nauto平臺的部署。

Heck說,最初,Nauto強(qiáng)調(diào)的是艙內(nèi)發(fā)生的場景。但在這個(gè)過程中,Nauto也收集了艙外的風(fēng)險(xiǎn)數(shù)據(jù),例如追尾、斑馬線上的行人、信號燈和停車標(biāo)識。

在開發(fā)AI算法來預(yù)測高風(fēng)險(xiǎn)事件時(shí),Nauto采用了基于深度學(xué)習(xí)的方法,使用從800個(gè)商業(yè)車隊(duì)收集的數(shù)據(jù)。Heck估計(jì),800個(gè)車隊(duì)相當(dāng)于200,000名司機(jī),車輛總數(shù)稍微少一些。

Nauto 學(xué)到了什么?

對于從200,000名車隊(duì)駕駛員收集的數(shù)據(jù),Heck說,“所有碰撞事故的70%都是由駕駛員不注意引起的。比如使用手機(jī)、吃東西、低頭做別的事或困倦,導(dǎo)致了分心。”

這都讓Heck感到驚訝。他解釋說,這意味著“整個(gè)汽車行業(yè)歷來都只專注于那余下的30%,而忽視了由艙內(nèi)引發(fā)的70%的風(fēng)險(xiǎn)?!?/p>

Heck稱駕駛員分心是“流行病”。盡管有這樣的證據(jù),但車內(nèi)監(jiān)控仍然是一個(gè)相對新的功能。當(dāng)Euro NCAP開始評估能有效檢測疲勞和分心的DMS時(shí),汽車OEM們才開始有動(dòng)力接受DMS。

安全專家們越來越認(rèn)為,來自DMS的準(zhǔn)確信息對安全至關(guān)重要。因?yàn)榫哂锌擅撌肿詣?dòng)駕駛的車輛正在陸續(xù)推出。

當(dāng)車廠允許人類駕駛員放開方向盤時(shí),DMS是一個(gè)后備方案,它能準(zhǔn)確地顯示出當(dāng)計(jì)算機(jī)駕駛員需要接管方向盤時(shí),人類司機(jī)正在做什么。

Nauto的路線圖

八年過去了,Nauto在車隊(duì)領(lǐng)域中取得了突破。Nauto的技術(shù)已被用于監(jiān)控商業(yè)車隊(duì)駕駛員以提高安全性。

那么,接下來會是什么呢?Heck說,Nauto的路線圖上有四件事。

首要的是“融合”。

Nauto正在努力融合車輛的外部和內(nèi)部風(fēng)險(xiǎn),創(chuàng)建一個(gè)“在駕駛監(jiān)控之上的下一級能力”。

Heck覺得車廠對有效的DMS越來越感興趣,而這正是Nauto的機(jī)會。

Heck說,內(nèi)外攝像頭數(shù)據(jù)的融合產(chǎn)生了全面的安全光譜?!叭绻覀冎礼{駛員分心了,我們會在碰撞之前更早介入?!彼Q這是“一種新能力”,因?yàn)橄袂胺脚鲎差A(yù)警這樣的ADAS功能通常獨(dú)立于DMS運(yùn)行。

a6290f3e-fe81-11ed-90ce-dac502259ad0.png

其次,Nauto的產(chǎn)品之前大部分在售后市場銷售,但即將進(jìn)入OEM車輛??梢詮腂rightDrop獲得集成了Nauto的電動(dòng)送貨車。Heck表示,Navistar正在推出搭載了Nauto的商用卡車,“在接下來的幾個(gè)月里還有更多的合作伙伴?!?/p>

第三,Nauto正在研究集成的保險(xiǎn)模型。“我們有一個(gè)合作伙伴關(guān)系,任何公用事業(yè)公司只要有合適的保險(xiǎn)供應(yīng)商,就可以有效地免費(fèi)獲取Nauto。”Heck提到了Nauto與英國最大的商業(yè)保險(xiǎn)公司Aviva的試點(diǎn)項(xiàng)目。Nauto的下一個(gè)目標(biāo)是美國。

Heck表示,公司的下一個(gè)目標(biāo)是讓Nauto設(shè)計(jì)到乘用車中。盡管尚未宣布,但計(jì)劃是“首先將Nauto集成到輕型商用車、貨車和皮卡中……然后擴(kuò)展到其它車型。”

硬件構(gòu)成

任何好的AI算法都需要優(yōu)秀的硬件,即合適的攝像頭和計(jì)算單元。那么,Nauto的售后市場平臺的硬件構(gòu)成是什么呢?

Nauto平臺的艙外攝像頭采用了Sony圖像傳感器,而艙內(nèi)攝像頭則是Omnivision的圖像傳感器。計(jì)算單元采用了Qualcomm Snapdragon 845,集成了高端GPU、DSP和8個(gè)Arm內(nèi)核。

Heck說,Nauto在Snapdragon上運(yùn)行的艙內(nèi)和艙外算法最高可達(dá)每秒15幀。Nauto在Snapdragon的Arm內(nèi)核上運(yùn)行其融合模型。

Nauto平臺可從OBD端口獲取數(shù)據(jù),使Nauto能夠讀取剎車位置、安全氣囊部署和其他車內(nèi)機(jī)械裝置。Nauto從GPS傳感器和多普勒接收車輛位置和速度數(shù)據(jù),然后融合所有數(shù)據(jù)。

當(dāng)被問到這是如何工作時(shí),Heck說:“我們會查看你面前是否有威脅,你正在以多快的速度行駛,你是否正在轉(zhuǎn)彎,以及你是否已經(jīng)在剎車。然后我們會監(jiān)控你的注意力狀態(tài)。如果你在保持專注,并且已經(jīng)開始剎車,我們不會干擾,因?yàn)槲覀冎滥阋呀?jīng)看到了威脅,并且已經(jīng)在應(yīng)對它。但如果你正在加速或保持速度不變,而你面前有威脅,而你正在看手機(jī)或喝咖啡,那么我們會警告你并進(jìn)行干預(yù)?!?/p>

那么,如果OEM想要在他們的車輛中使用Nauto,他們需要添加什么呢?

車輛應(yīng)該有一個(gè)200-500MP的艙外攝像頭,Heck說:“低于720P,就很困難了。如果沒有艙內(nèi)攝像頭顯然是個(gè)問題。但是,好在現(xiàn)在每個(gè)車廠都在考慮在他們的新車中增加DMS。”

大多數(shù)車輛已經(jīng)有了GPS和LTE。但是算力呢?

Heck承認(rèn),這個(gè)特性的差別很大。對于使用Intel/Mobileye的車輛,Nauto運(yùn)行在Xeon上。對于部署了Qualcomm高端汽車平臺的其他車輛,則沒有問題。Heck指出,現(xiàn)在只有少數(shù)OEM使用Nvidia。Nauto已經(jīng)在Nvidia上進(jìn)行了測試,但尚未部署。

關(guān)于Nauto的融合模型所需的處理能力,Heck表示:“這不是一個(gè)黑白分明的問題,因?yàn)樗惴ǖ牟煌糠窒牡挠?jì)算量不同……一般來說,它需要幾個(gè)TOPS?!?/p>

通過在AV堆棧上增加Nauto的融合模型,汽車OEM能獲得什么呢?Heck表示,Nauto可以為人類駕駛員提供更細(xì)顆粒度的安全介入。

“你看到一個(gè)行人正在你面前過馬路。如果你看著前方道路卻沒有做出反應(yīng),那就是……典型的行人碰撞預(yù)警的場景。所以,這種情況下我們只會在碰撞前約三秒鐘才介入。但如果你正在看手機(jī),根本沒看行人,我們可能會在碰撞前四秒介入。而如果你已經(jīng)開始剎車,然后,也在看行人,那么,我們就不會介入?!?/p>

Heck說,融合的目標(biāo)是“稀疏但有效地介入?!?/p>

當(dāng)Nauto供應(yīng)售后市場產(chǎn)品時(shí),它也提供了它開發(fā)的所有ADAS和DMS軟件部分。

但對于OEM車輛,所有的軟件部分都是“可選的”。例如,如果OEM更喜歡Mobileye的ADAS系統(tǒng)和Seeing Machines的DMS,那沒問題。OEM需要做的就是在他們的堆棧上添加Nauto更安全的融合模型。Nauto的模型可以授權(quán)。

競爭

盡管市面上還沒有ADAS+DMS融合模型,但Nauto可能不會長時(shí)間保持優(yōu)勢。

一些DMS技術(shù)供應(yīng)商正在他們的DMS算法中研發(fā)融合模型。

然而,Heck強(qiáng)調(diào)了Nauto的領(lǐng)先地位?!拔覀兪切袠I(yè)先驅(qū),我們擁有一些非?;镜年P(guān)于內(nèi)外融合的專利?!彼麤]有詳細(xì)說明,但補(bǔ)充說,“想要繞過這一點(diǎn)將會很困難?!?/p>

大數(shù)據(jù)也是Nauto的明顯優(yōu)勢。因?yàn)镹auto起初在商用車隊(duì)中開始運(yùn)營,積累了關(guān)于內(nèi)外關(guān)系的數(shù)據(jù)。Heck表示,Nauto的大部分競爭對手要么“只關(guān)注艙內(nèi),要么只關(guān)注艙外,他們從未同時(shí)關(guān)注過兩者。”

接著是行駛里程。比起Waymo積累的2000萬英里(這是所有自動(dòng)駕駛公司中最高的),Nauto已經(jīng)行駛了30億英里。

最后,因?yàn)镹auto一直與車隊(duì)合作,Heck說:“我們實(shí)際上知道其中涉及的經(jīng)濟(jì)風(fēng)險(xiǎn)。我們不僅會看它是否會導(dǎo)致碰撞,還會看碰撞的嚴(yán)重程度,以及會造成多大的損失。”

這種知識,在一個(gè)可預(yù)見的危險(xiǎn)情況下,將促使Nauto的技術(shù)提前介入。另一方面,在較不危險(xiǎn)的情況下,Nauto可以給予駕駛員更多的自由裁量權(quán)。Heck相信,管理這些變量最終可能會決定融合模型的用戶接受度。

Nauto已經(jīng)進(jìn)行了三輪融資,擁有約150名員工,其中三分之一是合同工。雖然尚未盈利,但Heck表示Nauto還處于“成長階段”,可能在幾年后進(jìn)行IPO。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 攝像頭
    +關(guān)注

    關(guān)注

    61

    文章

    5096

    瀏覽量

    103182
  • adas
    +關(guān)注

    關(guān)注

    311

    文章

    2331

    瀏覽量

    211961
  • 自動(dòng)駕駛
    +關(guān)注

    關(guān)注

    794

    文章

    14895

    瀏覽量

    180127

原文標(biāo)題:Nauto的“ADAS+DMS”的融合模型

文章出處:【微信號:Astroys,微信公眾號:Astroys】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    Smart Eye再獲歐洲卡車OEM的兩款車型DMS訂單

    Smart Eye 將為一現(xiàn)有歐洲客戶的兩款新型卡車車型提供其 DMS 軟件?;诋a(chǎn)品生命周期預(yù)測,該訂單的預(yù)計(jì)收入為 1500 萬瑞典克朗。
    的頭像 發(fā)表于 03-12 11:46 ?266次閱讀

    BOS Semiconductors 選擇 Ceva 的 AI DSP 用于下一代 ADAS 平臺

    Eagle-A 利用 SensPro? 加速 LiDAR 和雷達(dá)傳感工作負(fù)載, 實(shí)現(xiàn)實(shí)時(shí)感知和傳感器融合 隨著車輛向軟件定義架構(gòu)和復(fù)雜的ADAS系統(tǒng)演進(jìn),行業(yè)正轉(zhuǎn)向?qū)崟r(shí)傳感器處理、安全關(guān)鍵型智能
    的頭像 發(fā)表于 01-12 18:06 ?1360次閱讀
    BOS Semiconductors 選擇 Ceva 的 AI DSP  用于下一代 <b class='flag-5'>ADAS</b> 平臺

    星地?cái)?shù)據(jù)大模型融合分析與應(yīng)用分系統(tǒng)平臺的應(yīng)用與未來發(fā)展

    ? ? 星地?cái)?shù)據(jù)大模型融合分析與應(yīng)用分系統(tǒng) ? ?北京華盛恒輝星地?cái)?shù)據(jù)大模型融合分析與應(yīng)用分系統(tǒng),是一套整合衛(wèi)星通信與地面網(wǎng)絡(luò)數(shù)據(jù),依托大模型
    的頭像 發(fā)表于 12-29 10:12 ?220次閱讀

    DFRobot亮相貿(mào)澤電子elexcon 2025展臺,展示與Qwen3大模型融合的AI應(yīng)用

    8月26日,elexcon2025深圳國際電子展在深圳會展中心隆重開幕。在全球知名新品引入(NPI)代理商貿(mào)澤電子(Mouser Electronics) 展臺(1號館1Q30),DFRobot展示了其LattePanda Sigma單板計(jì)算機(jī)與Qwen3大語言模型融合
    的頭像 發(fā)表于 08-30 10:51 ?1018次閱讀

    CANoe中ADAS功能集介紹

    高級駕駛輔助系統(tǒng)(ADAS)在汽車中的應(yīng)用日益增長,為了滿足工程師對于ADAS的分析、仿真和測試等功能的需求,CANoe從15.0版本開始提供ADASFeatureSet(ADAS功能集,簡稱AFS
    的頭像 發(fā)表于 07-10 14:55 ?1322次閱讀
    CANoe中<b class='flag-5'>ADAS</b>功能集介紹

    NVIDIA助力圖靈新訊美推出企業(yè)級多模態(tài)視覺大模型融合解決方案

    中國推出企業(yè)級多模態(tài)視覺大模型融合解決方案,推動(dòng)先進(jìn) AI 模型在交通治理、工業(yè)質(zhì)檢、金融風(fēng)控等領(lǐng)域?qū)崿F(xiàn)高效識別、精準(zhǔn)預(yù)警和穩(wěn)定交付。
    的頭像 發(fā)表于 06-26 09:17 ?1361次閱讀

    佑駕創(chuàng)新獲得上汽大通智能座艙DMS項(xiàng)目獨(dú)家定點(diǎn)

    近日,佑駕創(chuàng)新(2431.HK)宣布獲得上汽大通智能座艙DMS(駕駛員監(jiān)測系統(tǒng))項(xiàng)目的獨(dú)家定點(diǎn)。根據(jù)規(guī)劃,佑駕創(chuàng)新全棧自研的智能座艙DMS一體機(jī)iCabin Lite,將全面搭載于上汽大通旗下多款輕客旗艦車型,標(biāo)志著公司在智能座艙的規(guī)?;瘧?yīng)用與全球化拓展取得新突破。
    的頭像 發(fā)表于 06-18 14:59 ?1683次閱讀

    商湯日日新SenseNova融合模態(tài)大模型 國內(nèi)首家獲得最高評級的大模型

    近日,中國信息通信研究院(以下簡稱“中國信通院”)完成可信AI多模態(tài)大模型首輪評估。 商湯日日新SenseNova融合模態(tài)大模型在所有模型中,獲得當(dāng)前最高評級——4+級,并成為國內(nèi)首家
    的頭像 發(fā)表于 06-11 11:57 ?1439次閱讀

    紅外LED在DMS和BSD系統(tǒng)中的應(yīng)用

    本文主要介紹了駕駛員監(jiān)控系統(tǒng)(DMS)和盲點(diǎn)檢測系統(tǒng)(BSD)的關(guān)鍵組件——紅外發(fā)光二極管(紅外LED),以及它們在夜間或低光環(huán)境下的精準(zhǔn)監(jiān)測功能。紅外LED憑借隱形照明、高效率和可靠性,為DMS和BSD提供關(guān)鍵支持。
    的頭像 發(fā)表于 04-25 09:59 ?916次閱讀

    康謀分享 | 特斯拉AD/ADAS緊急制動(dòng)安全分析案例

    基于1.5萬公里實(shí)測數(shù)據(jù),本文揭示Autopilot三大緊急制動(dòng)特征:對鄰車道的過度防御制動(dòng)、ODD外場景的靜默退出風(fēng)險(xiǎn)及信號燈響應(yīng)困境。研究通過多模態(tài)數(shù)據(jù)融合技術(shù),量化分析制動(dòng)事件,為ADAS系統(tǒng)優(yōu)化提供重要依據(jù)
    的頭像 發(fā)表于 04-23 09:34 ?2793次閱讀
    康謀分享 | 特斯拉AD/<b class='flag-5'>ADAS</b>緊急制動(dòng)安全分析案例

    ??低暟l(fā)布多模態(tài)大模型AI融合巡檢超腦

    基于海康觀瀾大模型技術(shù)體系,??低曂瞥鲂乱淮嗄B(tài)大模型AI融合巡檢超腦,全面升級人、車、行為、事件等算法,為行業(yè)帶來全新的多模態(tài)大模型巡檢體驗(yàn),以更準(zhǔn)確、更高效的智慧巡檢,為各行各
    的頭像 發(fā)表于 04-17 17:12 ?1648次閱讀

    海康威視綜合安防管理平臺融合DeepSeek與??涤^瀾大模型

    ??低暰C合安防管理平臺全新升級; 融合DeepSeek與??涤^瀾大模型;讓安防管理更加智能、便捷;助力大模型能力普惠于 各行各業(yè)安防場景。 綜合安防管理平臺Hikvision iSecure
    的頭像 發(fā)表于 03-31 11:46 ?2944次閱讀

    座艙網(wǎng)聯(lián)融合新旗艦!移遠(yuǎn)通信48 TOPS座艙方案攜AI大模型能力,賦能多域融合

    當(dāng)下,車載電子電器架構(gòu)正加速向域集中式架構(gòu)、跨域融合架構(gòu)演進(jìn),面對這一趨勢,移遠(yuǎn)通信持續(xù)重點(diǎn)加大在車載智能座艙領(lǐng)域的開發(fā)投入,其中48TOPS高算力5G智能座艙融合方案支持AI大模型能力,可為中
    的頭像 發(fā)表于 03-24 19:03 ?961次閱讀
    座艙網(wǎng)聯(lián)<b class='flag-5'>融合</b>新旗艦!移遠(yuǎn)通信48 TOPS座艙方案攜AI大<b class='flag-5'>模型</b>能力,賦能多域<b class='flag-5'>融合</b>

    商湯“日日新”融合模型登頂大語言與多模態(tài)雙榜單

    據(jù)弗若斯特沙利文(Frost & Sullivan, 簡稱“沙利文”)聯(lián)合頭豹研究院發(fā)布的《2025年中國大模型年度評測》結(jié)果顯示:在語言和多模態(tài)核心能力測評中,商湯“日日新”融合模型斬獲國內(nèi)第一梯隊(duì)成績。
    的頭像 發(fā)表于 03-18 10:35 ?1160次閱讀

    “天神之眼”帶飛DMS賽道,如何選擇合適方案?

    產(chǎn)業(yè)鏈規(guī)模擴(kuò)張,成本下降的同時(shí),還給不少處于邊緣的智駕廠商重新帶來了“上車”的機(jī)會。 ? 而智駕的普及,還帶來了座艙內(nèi)一種傳感器的需求,那就是DMS。DMS全稱Driver Monitor System,即駕駛員監(jiān)測系統(tǒng),實(shí)際上這種系統(tǒng)早在2006年就
    的頭像 發(fā)表于 03-16 09:26 ?1793次閱讀