91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Facebook提出通過(guò)聽自然語(yǔ)言訓(xùn)練自主機(jī)器人

汽車玩家 ? 來(lái)源:雷鋒網(wǎng) ? 作者:雷鋒網(wǎng) ? 2020-04-11 15:43 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

雷鋒網(wǎng)消息,據(jù)外媒Venturebeat報(bào)道,F(xiàn)acebook、喬治亞理工學(xué)院和俄勒岡州立大學(xué)的研究人員在本周發(fā)表的一篇預(yù)印本論文中,描述了人工智能的一項(xiàng)新任務(wù)——通過(guò)聽自然語(yǔ)言的指令,在3D環(huán)境中導(dǎo)航(例如,“走下大廳,在木桌旁左轉(zhuǎn)”)。他們說(shuō),這可以為遵循自然語(yǔ)言指令的機(jī)器人助手奠定基礎(chǔ)。

研究人員的任務(wù),被稱之為在連續(xù)環(huán)境中的視覺(jué)和語(yǔ)言導(dǎo)航(VLN-CE),是在Facebook的模擬器Habitat中進(jìn)行的,該模擬器可以訓(xùn)練機(jī)器人助手在模擬真實(shí)環(huán)境的環(huán)境中操作。直徑為0.2米、1.5米高的助手被放置在來(lái)自Matterport3D數(shù)據(jù)集的內(nèi)部,該數(shù)據(jù)集是通過(guò)10800多個(gè)全景圖和相應(yīng)的3D網(wǎng)格捕獲的90個(gè)環(huán)境的集合。

機(jī)器人助手必須在一條路徑上做四個(gè)動(dòng)作(向前移動(dòng)0.25米,左轉(zhuǎn)或右轉(zhuǎn)15度,或停在目標(biāo)位置)中的一個(gè),并學(xué)會(huì)避免被困在障礙物上,比如椅子和桌子上。

研究小組將這些環(huán)境提煉成4475條由4到6個(gè)節(jié)點(diǎn)組成的軌跡,這些軌跡對(duì)應(yīng)于在各個(gè)位置拍攝的360度全景圖像,顯示了導(dǎo)航能力。

他們用這個(gè)訓(xùn)練兩個(gè)人工智能模型:一個(gè)sequence-to-sequence模型,該模型由采取視覺(jué)觀察和指令表示的策略組成,并使用它們預(yù)測(cè)一個(gè)動(dòng)作;另一個(gè)是兩個(gè)網(wǎng)絡(luò)交叉模式注意模型,該模型跟蹤觀察結(jié)果,并根據(jù)指令和特征做出決策。

研究人員表示,在實(shí)驗(yàn)中,表現(xiàn)最好的機(jī)器人可以遵循“向左拐,進(jìn)入走廊”之類的指令,盡管這些指令要求機(jī)器人在發(fā)現(xiàn)視覺(jué)路標(biāo)之前轉(zhuǎn)動(dòng)未知的次數(shù)。事實(shí)上,機(jī)器人在看不見的環(huán)境,大約三分之一的場(chǎng)景中導(dǎo)航到目標(biāo)位置,平均采取了88次行動(dòng)。

這些機(jī)器人偶爾也會(huì)失敗,根據(jù)合著者的說(shuō)法,這些失敗通常是由于機(jī)器人在視覺(jué)上丟失了指令中提到的對(duì)象。

“至關(guān)重要的是,VLN-CE為(研究)社區(qū)提供了一個(gè)測(cè)試平臺(tái),在這里可以進(jìn)行研究高級(jí)和低級(jí)控制界面的這類集成實(shí)驗(yàn),”合著者寫道。

Facebook投入了大量資源來(lái)解決自主機(jī)器人導(dǎo)航的問(wèn)題。

雷鋒網(wǎng)了解到,今年6月,在公布了一項(xiàng)訓(xùn)練六足機(jī)器人走路的計(jì)劃后,F(xiàn)acebook首次推出了PyRobot,一種用于PyTorch機(jī)器學(xué)習(xí)框架的機(jī)器人框架。2018年,F(xiàn)acebook推出了開源人工智能,可以通過(guò)360度圖像在紐約市街道上導(dǎo)航。最近,F(xiàn)acebook的一個(gè)團(tuán)隊(duì)發(fā)表了一篇論文,描述了一個(gè)通過(guò)觀看視頻學(xué)習(xí)如何在辦公室里走動(dòng)的系統(tǒng)。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    213

    文章

    31122

    瀏覽量

    222436
  • Facebook
    +關(guān)注

    關(guān)注

    3

    文章

    1432

    瀏覽量

    58970
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    自然語(yǔ)言處理NLP的概念和工作原理

    自然語(yǔ)言處理 (NLP) 是人工智能 (AI) 的一個(gè)分支,它會(huì)教計(jì)算機(jī)如何理解口頭和書面形式的人類語(yǔ)言。自然語(yǔ)言處理將計(jì)算語(yǔ)言學(xué)與機(jī)器學(xué)習(xí)
    的頭像 發(fā)表于 01-29 14:01 ?417次閱讀
    <b class='flag-5'>自然語(yǔ)言</b>處理NLP的概念和工作原理

    《AI機(jī)器人控制進(jìn)階教程(入門版)》閱讀指引

    的預(yù)編程,只能在結(jié)構(gòu)化環(huán)境中工作。AI的引入(如計(jì)算機(jī)視覺(jué)、自然語(yǔ)言處理),賦予機(jī)器人感知、理解和決策的能力,使其能適應(yīng)開放、動(dòng)態(tài)的真實(shí)世界。2.解決復(fù)雜任務(wù)的核心本
    的頭像 發(fā)表于 01-07 10:56 ?2241次閱讀
    《AI<b class='flag-5'>機(jī)器人</b>控制進(jìn)階教程(入門版)》閱讀指引

    RK3576機(jī)器人核心:三屏異顯+八路攝像頭,重塑機(jī)器人交互與感知

    機(jī)器人· 應(yīng)用領(lǐng)域:迎賓機(jī)器人、養(yǎng)老機(jī)器人、導(dǎo)覽機(jī)器人· 多攝像頭輸入:同時(shí)實(shí)現(xiàn)人臉識(shí)別(迎賓)、跌倒檢測(cè)(養(yǎng)老)、自主導(dǎo)航避障(導(dǎo)覽)等多
    發(fā)表于 10-29 16:41

    工業(yè)機(jī)器人的特點(diǎn)

    機(jī)器人是關(guān)鍵。工業(yè)互聯(lián)網(wǎng)是通過(guò)端上的數(shù)據(jù)傳輸,經(jīng)過(guò)大數(shù)據(jù)分析和云計(jì)算處理,再進(jìn)行智能化決策的一整個(gè)過(guò)程,其中端的數(shù)據(jù)傳輸是基礎(chǔ)。工業(yè)互聯(lián)網(wǎng)的端包括機(jī)器人、傳感器等一切線下連接端口。因此發(fā)展工業(yè)
    發(fā)表于 07-26 11:22

    通過(guò)NVIDIA Cosmos模型增強(qiáng)機(jī)器人學(xué)習(xí)

    通用機(jī)器人的時(shí)代已經(jīng)到來(lái),這得益于機(jī)械電子技術(shù)和機(jī)器人 AI 基礎(chǔ)模型的進(jìn)步。但目前機(jī)器人技術(shù)的發(fā)展仍面臨一個(gè)關(guān)鍵挑戰(zhàn):機(jī)器人需要大量的訓(xùn)練
    的頭像 發(fā)表于 07-14 11:49 ?1109次閱讀
    <b class='flag-5'>通過(guò)</b>NVIDIA Cosmos模型增強(qiáng)<b class='flag-5'>機(jī)器人</b>學(xué)習(xí)

    RDK × 腿臂機(jī)器人:這只 “機(jī)械汪” 竟會(huì)說(shuō)人話、走花路!

    開源:Github:https://github.com/Hello-XSJ/RDK\_vlm\_demo.git-本項(xiàng)目聚焦腿臂機(jī)器人在多模態(tài)環(huán)境感知、自然語(yǔ)言交互和自主行為控制方面的技術(shù)瓶頸
    的頭像 發(fā)表于 07-01 20:27 ?1287次閱讀
    RDK × 腿臂<b class='flag-5'>機(jī)器人</b>:這只 “機(jī)械汪” 竟會(huì)說(shuō)人話、走花路!

    輪式移動(dòng)機(jī)器人電機(jī)驅(qū)動(dòng)系統(tǒng)的研究與開發(fā)

    【摘 要】以嵌入式運(yùn)動(dòng)控制體系為基礎(chǔ),以移動(dòng)機(jī)器人為研究對(duì)象,結(jié)合三輪結(jié)構(gòu)輪式移動(dòng)機(jī)器人,對(duì)二輪差速驅(qū)動(dòng)轉(zhuǎn)向自主移動(dòng)機(jī)器人運(yùn)動(dòng)學(xué)和動(dòng)力學(xué)空間模型進(jìn)行了分析和計(jì)算,研究和設(shè)計(jì)了
    發(fā)表于 06-11 14:30

    當(dāng)機(jī)器人遇上“語(yǔ)言障礙”:CCLINKIE轉(zhuǎn)Profinet的“破冰外掛”來(lái)啦\\!

    已成為核心競(jìng)爭(zhēng)力。CCLINKIE轉(zhuǎn)Profinet網(wǎng)關(guān)的價(jià)值,不僅是解決“語(yǔ)言不通”的表層問(wèn)題,更是通過(guò)協(xié)議互聯(lián)釋放設(shè)備潛能——正如某主機(jī)廠技術(shù)總監(jiān)所言:“在智能制造時(shí)代,能讓10年前的設(shè)備與最新
    發(fā)表于 06-04 14:31

    明遠(yuǎn)智睿SSD2351開發(fā)板:語(yǔ)音機(jī)器人領(lǐng)域的變革力量

    ,提高語(yǔ)音識(shí)別的準(zhǔn)確率;同時(shí)也可連接高質(zhì)量的揚(yáng)聲器,確保語(yǔ)音合成后的聲音清晰、自然。TF卡接口能夠存儲(chǔ)大量的語(yǔ)音數(shù)據(jù)、對(duì)話模型以及語(yǔ)音機(jī)器人的知識(shí)庫(kù),使其具備更豐富的語(yǔ)言表達(dá)和知識(shí)儲(chǔ)備。以太網(wǎng)和WIFI
    發(fā)表于 05-28 11:36

    盤點(diǎn)#機(jī)器人開發(fā)平臺(tái)

    地瓜機(jī)器人RDK X5開發(fā)套件地瓜機(jī)器人RDK X5開發(fā)套件產(chǎn)品介紹 旭日5芯片10TOPs算力-電子發(fā)燒友網(wǎng)機(jī)器人開發(fā)套件 Kria KR260機(jī)器人開發(fā)套件 Kria KR260-
    發(fā)表于 05-13 15:02

    詳細(xì)介紹機(jī)場(chǎng)智能指路機(jī)器人的工作原理

    免與行人發(fā)生碰撞,為旅客提供安全、舒適的引導(dǎo)服務(wù)。 智能交互系統(tǒng) 語(yǔ)音識(shí)別與理解 :智能指路機(jī)器人利用先進(jìn)的語(yǔ)音識(shí)別技術(shù),將旅客輸入的語(yǔ)音信號(hào)轉(zhuǎn)化為文字信息。然后,通過(guò)自然語(yǔ)言處理算法對(duì)文字進(jìn)行分析
    發(fā)表于 05-10 18:26

    【「# ROS 2智能機(jī)器人開發(fā)實(shí)踐」閱讀體驗(yàn)】視覺(jué)實(shí)現(xiàn)的基礎(chǔ)算法的應(yīng)用

    閱讀心得體會(huì):ROS2機(jī)器人視覺(jué)與地圖構(gòu)建技術(shù) 通過(guò)對(duì)本書第7章(ROS2視覺(jué)應(yīng)用)和第8章(ROS2地圖構(gòu)建)的學(xué)習(xí),我對(duì)機(jī)器人視覺(jué)感知和自主導(dǎo)航的核心技術(shù)有了更深入的理解。以下是我
    發(fā)表于 05-03 19:41

    【「# ROS 2智能機(jī)器人開發(fā)實(shí)踐」閱讀體驗(yàn)】機(jī)器人入門的引路書

    ROS的全稱:Robot Operating System 機(jī)器人操作系統(tǒng) ROS的 目的 :ROS支持通用庫(kù),是通信總線,協(xié)調(diào)多個(gè)傳感器 為了解決機(jī)器人里各廠商模塊不通用的問(wèn)題,讓機(jī)器人快速開發(fā)
    發(fā)表于 04-30 01:05

    禾賽科技聯(lián)手群核科技,打造高精度機(jī)器人仿真訓(xùn)練新方案

    2025 年 4 月 21 日,全球領(lǐng)先的激光雷達(dá)企業(yè)禾賽科技與空間智能企業(yè)群核科技宣布達(dá)成戰(zhàn)略合作,雙方將共同推出機(jī)器人仿真訓(xùn)練場(chǎng)景生成新方案。通過(guò)禾賽激光雷達(dá)與群核科技空間理解模型
    的頭像 發(fā)表于 04-29 17:03 ?1847次閱讀
    禾賽科技聯(lián)手群核科技,打造高精度<b class='flag-5'>機(jī)器人</b>仿真<b class='flag-5'>訓(xùn)練</b>新方案

    【「# ROS 2智能機(jī)器人開發(fā)實(shí)踐」閱讀體驗(yàn)】+內(nèi)容初識(shí)

    規(guī)劃:導(dǎo)航是機(jī)器人自主運(yùn)行的關(guān)鍵功能。書中詳細(xì)介紹了基于 ROS 2 的導(dǎo)航系統(tǒng),包括地圖創(chuàng)建、路徑規(guī)劃和導(dǎo)航控制等環(huán)節(jié)。首先,通過(guò)激光雷達(dá)等傳感器獲取環(huán)境信息,使用 SLAM(Simultaneous
    發(fā)表于 04-27 11:24