91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于圖像傳感器主動(dòng)感知真實(shí)世界的設(shè)想

ml8z_IV_Technol ? 作者:電子發(fā)燒友網(wǎng) ? 2019-03-09 10:42 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

2月6日,上海保隆科技有限公司(保隆科技)聯(lián)合上海芯侖光電科技有限公司(芯侖科技)、武漢大學(xué)共同發(fā)布的汽車動(dòng)態(tài)傳感器(DVS,Dynamic Vision Sensor)正是基于圖像傳感器能否像人眼一樣主動(dòng)感知真實(shí)世界這樣的大膽技術(shù)假設(shè)。

如果我們希望人工智能像人一樣思考,那么圖像傳感器能否像人眼一樣主動(dòng)感知真實(shí)世界?

2月6日,上海保隆科技有限公司(保隆科技)聯(lián)合上海芯侖光電科技有限公司(芯侖科技)、武漢大學(xué)共同發(fā)布的汽車動(dòng)態(tài)傳感器(DVS,Dynamic Vision Sensor)正是基于這樣的大膽技術(shù)假設(shè)。傳統(tǒng)圖像傳感器基于幀的概念,原理性的缺陷導(dǎo)致運(yùn)動(dòng)信息缺失、海量無(wú)效數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)輸出,從而帶來(lái)巨大的數(shù)據(jù)傳輸和存儲(chǔ)壓力、運(yùn)算資源的浪費(fèi)、系統(tǒng)整體能耗和成本的上升、以及穩(wěn)定性的缺陷;DVS采用新型的仿生原理圖像傳感器芯片,全時(shí)全速追蹤運(yùn)動(dòng)物體,有效過(guò)濾冗余背景信息,輸出運(yùn)動(dòng)物體的結(jié)構(gòu)化場(chǎng)景信息,實(shí)現(xiàn)感知端預(yù)處理,減輕后端信號(hào)處理算法的復(fù)雜度,并使用更低的計(jì)算資源處理器來(lái)實(shí)現(xiàn)實(shí)時(shí)處理能力。保隆科技將其形容為“超眼”。

低數(shù)據(jù)流,剔除冗余數(shù)據(jù):道路兩邊靜止的車輛和建筑(非動(dòng)態(tài)數(shù)據(jù))“消失”

DVS為L(zhǎng)4、L5高級(jí)別自動(dòng)駕駛感知系統(tǒng)提供了一條新的技術(shù)路線。國(guó)際上開(kāi)發(fā)DVS的代表性公司包括瑞士的Inilabs、法國(guó)的Prophesee以及三星,此次保隆發(fā)布的DVS 屬于自主研發(fā),集成了芯侖科技的芯片技術(shù)和武漢大學(xué)的算法技術(shù)。相比于保隆科技當(dāng)天發(fā)布的77G及24G毫米波雷達(dá)、雙向前視系統(tǒng)、紅外熱成像夜視儀、駕駛員預(yù)警系統(tǒng)、車用人臉識(shí)別系統(tǒng)等產(chǎn)品,保隆科技汽車電子單元總監(jiān)李威表示,DVS是保隆科技“引領(lǐng)戰(zhàn)略”下的傳感器產(chǎn)品,是保隆科技的技術(shù)創(chuàng)新,也是自動(dòng)駕駛行業(yè)的技術(shù)創(chuàng)新。

據(jù)芯侖科技聯(lián)合創(chuàng)始人、CTO陳守順博士介紹,此次發(fā)布的DVS核心技術(shù)是模仿人眼視神經(jīng),以事件為驅(qū)動(dòng)原理,可如人眼一般主動(dòng)看世界:

· 無(wú)固定觀察頻率

· 靈敏響應(yīng)速度

· 脈沖式信息讀取和輸出

· 像素電路間并行處理

· 主動(dòng)特征提取,無(wú)多余背景信息

每個(gè)像素電路獨(dú)立檢測(cè)光強(qiáng)水平,無(wú)需曝光,不受幀率約束。當(dāng)光強(qiáng)發(fā)生變化時(shí),便以極快的反應(yīng)速度(5納秒)輸出一個(gè)包含(X、Y、A、T)的事件(event)數(shù)據(jù)。

進(jìn)出隧道瞬間,不受光照強(qiáng)烈變化影響,仍可捕捉路面信息

尤需指出的是,該DVS可實(shí)現(xiàn)多種模式同時(shí)輸出:

圖像模式(Picture Mode):與傳統(tǒng)圖像傳感器一致的全副圖像,兼容傳統(tǒng)圖像處理算法和硬件。

動(dòng)態(tài)模式(Motion/Event Mode):動(dòng)態(tài)特征脈沖信號(hào)通過(guò)自然光強(qiáng)變化的判定輸出二值化的動(dòng)態(tài)特征區(qū)域信息(X、Y、A、T)。

光流模式(Optical Flow Mode):獨(dú)有的密集光流模式,無(wú)需降維,從芯片上得到光流向量場(chǎng)信息。

高架上行駛,完整捕捉道路標(biāo)線和交通標(biāo)識(shí)

自動(dòng)駕駛、尤其是L4、L5高度自動(dòng)駕駛,面臨大量對(duì)實(shí)時(shí)和高速處理要求高、算力不可達(dá)的場(chǎng)景,以及一些邊緣性場(chǎng)景(Corner Case),基于上述原理和核心技術(shù),DVS動(dòng)態(tài)視覺(jué)傳感器有能力解決。比如特斯拉Model S將卡車誤判為白云、Uber自動(dòng)駕駛車輛夜晚撞死橫穿馬路的行人、以及自動(dòng)駕駛車輛進(jìn)出隧道光強(qiáng)變化等場(chǎng)景。保隆科技汽車電子單元總監(jiān)李威表示,他們將特別選取一些場(chǎng)景,在封閉測(cè)試場(chǎng)內(nèi)對(duì)DVS的性能開(kāi)展測(cè)試。

極暗場(chǎng)景下,也可清晰顯示部分物體的移動(dòng)

據(jù)李威透露,當(dāng)前保隆科技已完成DVS攝像頭本體、處理器平臺(tái)的研發(fā)集成工作,正在進(jìn)行運(yùn)算平臺(tái)的優(yōu)化,預(yù)計(jì)今年底可完成,明年將提供標(biāo)準(zhǔn)化的產(chǎn)品,進(jìn)行小批量的量產(chǎn)。今年將為包括商用車、乘用車、特種車輛的合作伙伴提供定制化產(chǎn)品,進(jìn)行裝車試用。宇通客車是保隆DVS的重要合作伙伴,宇通汽車智能研究院副院長(zhǎng)彭能嶺博士出席發(fā)布會(huì),對(duì)DVS在自動(dòng)駕駛領(lǐng)域的應(yīng)用前景、以及與保隆的合作研發(fā)均充滿希望。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴

原文標(biāo)題:動(dòng)態(tài)視覺(jué)傳感器(DVS):高級(jí)自動(dòng)駕駛的“超眼”

文章出處:【微信號(hào):IV_Technology,微信公眾號(hào):智車科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    基于低壓差穩(wěn)壓的工業(yè)圖像傳感器供電方案教程

    《工業(yè)圖像傳感器供電方案教程》圍繞穩(wěn)壓型降壓電源、低壓差穩(wěn)壓(LDO)、Hyperlux CMOS圖像傳感器等展開(kāi)講解。
    的頭像 發(fā)表于 01-27 16:43 ?4083次閱讀
    基于低壓差穩(wěn)壓<b class='flag-5'>器</b>的工業(yè)<b class='flag-5'>圖像</b><b class='flag-5'>傳感器</b>供電方案教程

    敏源傳感物理AI驅(qū)動(dòng)感知新突破專場(chǎng)直播預(yù)告

    1月14日(周三)下午14:00,云漢芯城在線直播之敏源專場(chǎng)——“物理AI驅(qū)動(dòng)感知新突破”將全面開(kāi)啟。屆時(shí),敏源將集中展示八款基于物理AI技術(shù)的主推產(chǎn)品,并深度解析從傳感芯片到實(shí)際應(yīng)用場(chǎng)景的創(chuàng)新思路。
    的頭像 發(fā)表于 01-14 11:44 ?511次閱讀

    如何處理自動(dòng)駕駛感知傳感器臟污問(wèn)題?

    [首發(fā)于智駕最前沿微信公眾號(hào)]自動(dòng)駕駛系統(tǒng)依賴多種傳感器來(lái)感知外界環(huán)境,攝像頭負(fù)責(zé)將光學(xué)圖像轉(zhuǎn)換為圖像數(shù)據(jù)供算法解析,激光雷達(dá)生成描述物體三維形狀的點(diǎn)云數(shù)據(jù),毫米波雷達(dá)探測(cè)目標(biāo)的距離與
    的頭像 發(fā)表于 10-21 13:50 ?474次閱讀
    如何處理自動(dòng)駕駛<b class='flag-5'>感知</b><b class='flag-5'>傳感器</b>臟污問(wèn)題?

    安森美圖像傳感器在機(jī)器視覺(jué)的應(yīng)用

    下面的框圖展示了采用安森美 (onsemi) 推薦產(chǎn)品的機(jī)器視覺(jué)方案,該方案集成了多種圖像感知和深度感知技術(shù),運(yùn)用了安森美的全局和卷簾快門傳感器系列產(chǎn)品。電源管理、通信等大多數(shù)功能塊器
    的頭像 發(fā)表于 10-13 15:20 ?1432次閱讀
    安森美<b class='flag-5'>圖像</b><b class='flag-5'>傳感器</b>在機(jī)器視覺(jué)的應(yīng)用

    機(jī)器人競(jìng)技幕后:磁傳感器芯片激活 “精準(zhǔn)感知力”

    2025 世界人形機(jī)器人運(yùn)動(dòng)會(huì)于 8 月 17 日?qǐng)A滿收官,賽場(chǎng)上機(jī)器人在跑步、跳躍、抓取等項(xiàng)目中的精彩表現(xiàn),背后是運(yùn)動(dòng)控制、環(huán)境感知等技術(shù)的迭代升級(jí)。而在這些技術(shù)中,磁傳感器芯片憑借獨(dú)特優(yōu)勢(shì),成為
    發(fā)表于 08-26 10:02

    意法半導(dǎo)體圖像傳感器的崛起之路

    從Yole提供的數(shù)據(jù)我們可以看到,攝像頭傳感圖像傳感器在未來(lái)大有可為。手機(jī)、工業(yè)以及汽車等應(yīng)用是目前2D成像所關(guān)注的主要市場(chǎng),成像技術(shù)也正在圍繞這些市場(chǎng)實(shí)現(xiàn)有機(jī)增長(zhǎng)。與此同時(shí),3D深度感知
    的頭像 發(fā)表于 08-01 09:44 ?1536次閱讀

    小身軀大能量:小型超聲波傳感器,開(kāi)啟智能感知新紀(jì)元

    在萬(wàn)物互聯(lián)的智能時(shí)代,傳感器如同人類的"感官神經(jīng)",讓機(jī)器得以感知世界、理解環(huán)境。而在這場(chǎng)感知革命中,小型超聲波傳感器正以"隱形守護(hù)者"的姿
    的頭像 發(fā)表于 07-18 08:47 ?484次閱讀

    從運(yùn)動(dòng)感知到有效執(zhí)行控制的關(guān)鍵為什么是IMU?

    無(wú)人機(jī)穩(wěn)定飛行、機(jī)器人精準(zhǔn)控制及工業(yè)自動(dòng)化都需要高精度、高可靠的運(yùn)動(dòng)感知,感知數(shù)據(jù)質(zhì)量不足或延遲,無(wú)法有效支撐高精度、高響應(yīng)的閉環(huán)控制。這類設(shè)備都會(huì)使用IMU進(jìn)行運(yùn)動(dòng)感知,但高性能慣性測(cè)量的需求與項(xiàng)目嚴(yán)格的成本預(yù)算之間卻出現(xiàn)了難
    的頭像 發(fā)表于 07-09 16:13 ?593次閱讀

    CMOS圖像傳感器的制造步驟

    CIS 英文全名 CMOS (Complementary Metal-Oxide Semiconductor) Image Sensor,中文意思是互補(bǔ)性金屬氧化物半導(dǎo)體圖像傳感器。CMOS 圖像
    的頭像 發(fā)表于 06-18 11:40 ?2093次閱讀
    CMOS<b class='flag-5'>圖像</b><b class='flag-5'>傳感器</b>的制造步驟

    從溫度計(jì)到AI感知中樞:解碼傳感器分類的“感官革命”

    清晨,手機(jī)鬧鐘因運(yùn)動(dòng)傳感器感知到你的翻身而自動(dòng)暫停;開(kāi)車時(shí),毫米波雷達(dá)與攝像頭傳感器協(xié)同判斷路況;醫(yī)院里,可穿戴心電傳感器24小時(shí)監(jiān)測(cè)健康數(shù)據(jù)……這些看似平凡的場(chǎng)景背后,是一場(chǎng)由
    的頭像 發(fā)表于 04-30 08:33 ?2120次閱讀

    仿生傳感器:讓機(jī)器擁有“生命感知”的神奇科技

    在科幻電影中,機(jī)器人通過(guò)皮膚感知溫度、用“鼻子”識(shí)別氣味、用“耳朵”捕捉聲音的場(chǎng)景曾令人驚嘆。如今,這些“超能力”正通過(guò)仿生傳感器逐漸走進(jìn)現(xiàn)實(shí)。仿生傳感器,這一融合生物學(xué)與工程學(xué)的創(chuàng)新技術(shù),正在重塑
    的頭像 發(fā)表于 04-28 17:25 ?1308次閱讀

    探秘傳感器類型:開(kāi)啟智能感知新視界

    類型的奇妙世界。 物理傳感器,堪稱感知物理世界的“先鋒”。溫度傳感器,就像是一位貼心的“溫度管家”,在智能家居中,它能實(shí)時(shí)監(jiān)測(cè)室內(nèi)溫度,并根
    的頭像 發(fā)表于 04-08 08:33 ?630次閱讀
    探秘<b class='flag-5'>傳感器</b>類型:開(kāi)啟智能<b class='flag-5'>感知</b>新視界

    生物傳感器:解鎖生命密碼的“芯片”,正在改變世界感知方式

    驚人的速度滲透到醫(yī)療、環(huán)境、食品等多個(gè)領(lǐng)域,悄然重塑人類感知世界的方式。 一、生命與機(jī)器的“對(duì)話”:生物傳感器的工作原理 生物傳感器如同一座“生物-電子翻譯
    的頭像 發(fā)表于 03-26 18:19 ?1254次閱讀

    光電式傳感器:精準(zhǔn)捕捉光線,智能感知未來(lái)

    在科技日新月異的今天,傳感器作為連接物理世界與數(shù)字世界的橋梁,扮演著舉足輕重的角色。而在眾多傳感器中,光電式傳感器憑借其獨(dú)特的優(yōu)勢(shì),正逐步成
    的頭像 發(fā)表于 03-18 08:36 ?903次閱讀

    深度剖析傳感器仿真

    傳感器仿真對(duì)真實(shí)世界傳感器的物理屬性和行為進(jìn)行建模,以再現(xiàn)其感知周圍環(huán)境的過(guò)程。該技術(shù)使開(kāi)發(fā)者能夠擁有一個(gè)安全的試驗(yàn)場(chǎng),來(lái)訓(xùn)練、測(cè)試和驗(yàn)證用
    的頭像 發(fā)表于 03-14 09:40 ?1237次閱讀