91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

目前幾種主流的機(jī)器人智能抓取系統(tǒng)方案

新機(jī)器視覺 ? 來源:新機(jī)器視覺 ? 2023-11-14 14:20 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

機(jī)器人學(xué)習(xí)中的經(jīng)典問題之一便是分揀:在一堆無序擺放的物品堆中,取出目標(biāo)物品。在快遞分揀員看來,這幾乎是一個(gè)不需要思考的過程,但對于機(jī)械臂而言,這意味著復(fù)雜的矩陣計(jì)算。

事實(shí)上,對于人類需要耗費(fèi)大量時(shí)間的數(shù)理難題,用智能系統(tǒng)處理起來就顯得十分容易,但在幾乎不需要思考的情況下就能做出的分選動作,則是全世界機(jī)機(jī)器人研究專家關(guān)注的熱點(diǎn)。

a8e3b0dc-82a0-11ee-939d-92fbcf53809c.jpg

機(jī)械臂抓取需要確定每段機(jī)械臂的位姿

首先,機(jī)械臂需要視覺伺服系統(tǒng),來確定物體的位置,根據(jù)末端執(zhí)行器(手)和視覺傳感器(眼)的相對位置,可分為Eye-to-HandEye-in-Hand兩種系統(tǒng)。

Eye-to-Hand的分離式分布,視野固定不變,如果相機(jī)的標(biāo)定精度高的話,那么視覺定位于抓取的精度也越高。

Eye-in-Hand則將機(jī)械臂與視覺傳感器固定在一起,視野隨機(jī)械臂的移動而改變,傳感器越近時(shí)精度越高,但過于靠近時(shí)則可能使目標(biāo)超出視野范圍。

a8f8b75c-82a0-11ee-939d-92fbcf53809c.jpg

精密的視覺系統(tǒng)與靈活機(jī)械臂的配合,才能完成一次完美的抓取,而這正是當(dāng)前機(jī)器人操作中的核心難題,歸納起來就是這么一件事:找到合適的抓取點(diǎn)(或吸附點(diǎn)),抓住它。之后的轉(zhuǎn)運(yùn)執(zhí)行,則屬于運(yùn)動規(guī)劃的分支。

目前幾種主流的解決方案

Model-based(基于模型的方法)

這種方法很好理解,即知道要抓什么,事先采用實(shí)物掃描的方式,提前將模型的數(shù)據(jù)給到機(jī)器人系統(tǒng),機(jī)器在實(shí)際抓取中就只需要進(jìn)行較少的運(yùn)算:

1. 離線計(jì)算:根據(jù)搭載的末端類型,對每一個(gè)物體模型計(jì)算局部抓取點(diǎn);

2. 在線感知:通過RGB或點(diǎn)云圖,計(jì)算出每個(gè)物體的三維位姿;

3. 計(jì)算抓取點(diǎn):在真實(shí)世界的坐標(biāo)系下,根據(jù)防碰撞等要求,選取每個(gè)物體的最佳抓取點(diǎn)。

RGB顏色空間由紅綠藍(lán)三種基本色組成,疊加成任意色彩,同樣地,任意一種顏色也可以拆解為三種基本色的組合,機(jī)器人通過顏色坐標(biāo)值來理解“顏色”。這種方式與人眼識別顏色的方向相似,在顯示屏上廣泛采用。

Half-Model-based(半模型的方法)

在這種訓(xùn)練方式中,不需要完全預(yù)知抓取的物體,但是需要大量類似的物體來訓(xùn)練算法,讓算法得以在物品堆中有效對圖像進(jìn)行“分割”,識別出物體的邊緣。這種訓(xùn)練方式,需要這些流程:

1.離線訓(xùn)練圖像分割算法,即把圖片里的像素按物體區(qū)分出來,此類工作一般由專門的數(shù)據(jù)標(biāo)注員來處理,按工程師的需求,標(biāo)注出海量圖片中的不同細(xì)節(jié);

2.在線處理圖像分割,在人工標(biāo)注出的物體上,尋找合適的抓取點(diǎn)。

這是一種目前應(yīng)用較為廣泛的方式,也是機(jī)械臂抓取得以推進(jìn)的主要推力。機(jī)械臂技術(shù)發(fā)展緩慢,但計(jì)算機(jī)視覺的圖像分割則進(jìn)展迅速,也從側(cè)面撬動了機(jī)器人、無人駕駛等行業(yè)的發(fā)展。

a92d4f58-82a0-11ee-939d-92fbcf53809c.jpg

Model-free(自由模型)

這種訓(xùn)練方式不涉及到“物體”的概念,機(jī)器直接從RGB圖像或點(diǎn)云圖上計(jì)算出合適的抓取點(diǎn),基本思路就是在圖像上找到Antipodal(對映點(diǎn)),即有可能“抓的起來”的點(diǎn),逐步訓(xùn)練出抓取策略。這種訓(xùn)練方式往往讓機(jī)器手大量嘗試不同種類的物品,進(jìn)行self-supervisedlearning,Google的Arm Farm,即為其中的代表之一。

值得注意的是,對于機(jī)械手而言,不同形狀的物品,抓取難度有天壤之別。即便是同樣形狀的物體,由于表面反光度和環(huán)境光照的影響,在不同場景的抓取難度也大相徑庭。從實(shí)驗(yàn)室到商業(yè)落地,其中有相當(dāng)一段路要走。

高精密度的相機(jī)研發(fā),是機(jī)器人“感知”物體的第一步。

實(shí)際商業(yè)場景中,最麻煩的物體總是“下一個(gè)物體”。工業(yè)機(jī)器人要真正融入實(shí)際生產(chǎn)體系,只有具備聰明的大腦,針對不同工況做出柔性的調(diào)整,才能拓寬工業(yè)機(jī)器人的使用場景。







審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    213

    文章

    31109

    瀏覽量

    222398
  • RGB
    RGB
    +關(guān)注

    關(guān)注

    4

    文章

    831

    瀏覽量

    61996
  • 視覺傳感器
    +關(guān)注

    關(guān)注

    3

    文章

    276

    瀏覽量

    23872
  • 伺服系統(tǒng)
    +關(guān)注

    關(guān)注

    14

    文章

    606

    瀏覽量

    41811
  • 計(jì)算機(jī)視覺
    +關(guān)注

    關(guān)注

    9

    文章

    1715

    瀏覽量

    47641

原文標(biāo)題:機(jī)器人智能抓取系統(tǒng):目前幾種主流的解決方案

文章出處:【微信號:vision263com,微信公眾號:新機(jī)器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    智能機(jī)器人線圈在核心驅(qū)動系統(tǒng)中的關(guān)鍵作用

    的關(guān)鍵單元,直接決定了整機(jī)系統(tǒng)的性能上限。 在驅(qū)動系統(tǒng)中主要應(yīng)用于無刷電機(jī)、伺服電機(jī)和力矩電機(jī)等關(guān)鍵部位。智能機(jī)器人需要完成抓取、移動、避障
    的頭像 發(fā)表于 03-02 16:24 ?91次閱讀

    解鎖“試管自動抓取搬運(yùn)”新紀(jì)元:富唯智能復(fù)合機(jī)器人重塑精準(zhǔn)物流

    在工業(yè)自動化的浪潮中,如何高效、精準(zhǔn)地完成如“試管自動抓取搬運(yùn)”這類高要求的物料處理任務(wù),成為許多行業(yè)邁向智能化升級的關(guān)鍵挑戰(zhàn)。富唯智能推出的復(fù)合機(jī)器人解決
    的頭像 發(fā)表于 12-31 17:01 ?1338次閱讀
    解鎖“試管自動<b class='flag-5'>抓取</b>搬運(yùn)”新紀(jì)元:富唯<b class='flag-5'>智能</b>復(fù)合<b class='flag-5'>機(jī)器人</b>重塑精準(zhǔn)物流

    高精度機(jī)器人控制的核心——基于 MYD-LT536 開發(fā)板的精密運(yùn)動控制方案

    校正方案,實(shí)時(shí)補(bǔ)償位置偏差與溫度漂移,顯著提升軌跡規(guī)劃精度與重復(fù)定位精度。 4. 模塊化系統(tǒng)集成方案 MYD-LT536 提供完整SDK、Linux 驅(qū)動與開發(fā)文檔,可快速構(gòu)建機(jī)器人系統(tǒng)集成
    發(fā)表于 11-14 15:48

    機(jī)器人競技幕后:磁傳感器芯片激活 “精準(zhǔn)感知力”

    地磁基準(zhǔn)的慣性導(dǎo)航系統(tǒng)可持續(xù)提供可靠數(shù)據(jù)。實(shí)測顯示,搭載昆泰芯 KTM59 系列融合磁傳感器的機(jī)器人,在復(fù)雜動態(tài)環(huán)境中定位可靠性達(dá) 99.7%,較單一傳感器方案提升 27%。 磁傳感器芯片的技術(shù)突破
    發(fā)表于 08-26 10:02

    智慧檔案庫房|經(jīng)世智能復(fù)合機(jī)器人檔案存取與轉(zhuǎn)運(yùn)解決方案

    與轉(zhuǎn)運(yùn):復(fù)合機(jī)器人通過集成AGV自動導(dǎo)航、機(jī)械臂抓取和RFID識別技術(shù),實(shí)現(xiàn)檔案的全流程無人化操作。高密度存儲環(huán)境下精準(zhǔn)作業(yè):結(jié)合智能密集架和RFID系統(tǒng)
    的頭像 發(fā)表于 08-12 16:43 ?1009次閱讀
    智慧檔案庫房|經(jīng)世<b class='flag-5'>智能</b>復(fù)合<b class='flag-5'>機(jī)器人</b>檔案存取與轉(zhuǎn)運(yùn)解決<b class='flag-5'>方案</b>

    工業(yè)機(jī)器人的特點(diǎn)

    的基礎(chǔ),也是三者的實(shí)現(xiàn)終端,智能制造裝備產(chǎn)業(yè)包括高檔數(shù)控機(jī)床、工業(yè)機(jī)器人、自動化成套生產(chǎn)線、精密儀器儀表、智能傳感器、汽車自動化焊接線、柔性自動化生產(chǎn)線、智能農(nóng)機(jī)、3D 打印機(jī)等領(lǐng)域。
    發(fā)表于 07-26 11:22

    盤點(diǎn)#機(jī)器人開發(fā)平臺

    圖,電子技術(shù)資料網(wǎng)站具身智能機(jī)器人****開發(fā)平臺——Fibot廣和通發(fā)布機(jī)器人開發(fā)平臺-電子發(fā)燒友網(wǎng)NVIDIA Isaac 英偉達(dá)綜合性機(jī)器人開發(fā)平臺NVIDIA Isaac 是英
    發(fā)表于 05-13 15:02

    詳細(xì)介紹機(jī)場智能指路機(jī)器人的工作原理

    機(jī)場智能指路機(jī)器人主要依靠感知系統(tǒng)、定位系統(tǒng)、導(dǎo)航系統(tǒng)智能交互
    發(fā)表于 05-10 18:26

    【「# ROS 2智能機(jī)器人開發(fā)實(shí)踐」閱讀體驗(yàn)】視覺實(shí)現(xiàn)的基礎(chǔ)算法的應(yīng)用

    與地圖構(gòu)建:讓機(jī)器人理解環(huán)境 第8章聚焦SLAM(同步定位與地圖構(gòu)建)技術(shù),介紹了SLAM Toolbox和Cartographer兩大主流框架。我的學(xué)習(xí)體會如下: SLAM的核心原理 SLAM
    發(fā)表于 05-03 19:41

    【「# ROS 2智能機(jī)器人開發(fā)實(shí)踐」閱讀體驗(yàn)】+內(nèi)容初識

    《ROS 2智能機(jī)器人開發(fā)實(shí)踐》內(nèi)容閱讀初體驗(yàn) 《ROS 2 智能機(jī)器人開發(fā)實(shí)踐》是一本針對 ROS 2(Robot Operating System 2)這一先進(jìn)
    發(fā)表于 04-27 11:24

    大象機(jī)器人攜手進(jìn)迭時(shí)空推出 RISC-V 全棧開源六軸機(jī)械臂產(chǎn)品

    識別聯(lián)調(diào)。 進(jìn)迭時(shí)空致力于為智能機(jī)器人提供完整全棧優(yōu)化的RISC-V AI軟硬件解決方案,第一代RISC-V AI CPU芯片K1已完成AI視覺感知、AI語音處理、自動避障、路徑規(guī)劃、運(yùn)動控制等
    發(fā)表于 04-25 17:59

    富唯智能最小復(fù)合機(jī)器人的強(qiáng)大抓取實(shí)力?

    在工業(yè)自動化領(lǐng)域,復(fù)合機(jī)器人的身影愈發(fā)常見。但你是否好奇,最小的復(fù)合機(jī)器人抓取多少多重?富唯智能以創(chuàng)新技術(shù),給出了令人驚嘆的答案,徹底顛覆我們對小身形
    的頭像 發(fā)表于 04-16 16:31 ?686次閱讀
    富唯<b class='flag-5'>智能</b>最小復(fù)合<b class='flag-5'>機(jī)器人</b>的強(qiáng)大<b class='flag-5'>抓取</b>實(shí)力?

    復(fù)合機(jī)器人抓取精度的影響因素及提升策略

    復(fù)合機(jī)器人結(jié)合了移動機(jī)器人(如AGV)和機(jī)械臂的功能,廣泛應(yīng)用于物流、制造等領(lǐng)域。抓取精度是其核心性能指標(biāo)之一,直接影響作業(yè)效率和產(chǎn)品質(zhì)量。本文將探討復(fù)合機(jī)器人
    的頭像 發(fā)表于 04-12 11:15 ?1066次閱讀

    工業(yè)機(jī)器人4大控制方式,你知道幾種?

    方式和智能控制方式四種,這幾種控制方式的功能要點(diǎn)有哪些。 智慧倉儲物流 01 點(diǎn)位控制方式(PTP) 這種控制方式只對工業(yè)機(jī)器人末端執(zhí)行器在作業(yè)空間中某些規(guī)定的離散點(diǎn)上的位姿進(jìn)行控制。在控制時(shí),只要求工業(yè)
    的頭像 發(fā)表于 03-13 10:11 ?1798次閱讀
    工業(yè)<b class='flag-5'>機(jī)器人</b>4大控制方式,你知道<b class='flag-5'>幾種</b>?

    研華科技加速智能自主系統(tǒng)機(jī)器人應(yīng)用發(fā)展

    研華科技近日舉辦“智能自主系統(tǒng)機(jī)器人應(yīng)用伙伴高峰論壇”,將攜手生態(tài)伙伴,打造靈活且ROS兼容的機(jī)器人解決方案。
    的頭像 發(fā)表于 03-11 13:46 ?919次閱讀