預(yù)測這件事情的重要性不言而喻。畢竟如果你比別人提前知道信息就能夠搶占先機(jī)。
先不說搶占先機(jī)這件事情,如果你能夠預(yù)測的對方接下來的動(dòng)作,至少下面這種情況不會發(fā)生。
現(xiàn)在,通過人工智能或許能夠改善一些。
近日,東京工業(yè)大學(xué)研究小組發(fā)布了一套格斗訓(xùn)練系統(tǒng)“FuturePose”,通過深度學(xué)習(xí)能預(yù)測 0.5 秒后對手的動(dòng)作。
在這項(xiàng)研究中,研究人員開發(fā)了一套系統(tǒng),通過從一個(gè) RGB 相機(jī)捕獲的圖像中,從 30 fps(1幀= 1/30秒)圖像中預(yù)測15幀后,即0.5秒后的動(dòng)作,然后進(jìn)行戰(zhàn)斗訓(xùn)練。對戰(zhàn)對手不同裝束,而受訓(xùn)者可以戴 VR 頭盔來同時(shí)觀察對手的當(dāng)前姿勢和預(yù)測的0.5秒后的姿勢。

首先,通過殘差網(wǎng)絡(luò)(學(xué)習(xí)輸出減去輸入殘差的機(jī)器學(xué)習(xí))來分析RGB圖像,以估計(jì)對手的2D位置。該位置輸入到 LSTM(可以學(xué)習(xí)長時(shí)序列數(shù)據(jù)的模型)以學(xué)習(xí)時(shí)序特征,并且預(yù)測未來的2D位置。
之后用網(wǎng)格光流(為向量來視覺化表示物體移動(dòng)。通過將物體網(wǎng)格化減少計(jì)算量),將我們使用晶格光流(它表示物體的運(yùn)動(dòng)作為視覺表示中的矢量。物體的復(fù)雜性通過晶格簡化以減少計(jì)算量),將位置信息轉(zhuǎn)換成了人便于看的“運(yùn)動(dòng)”表示。
在視頻中,研究者分別進(jìn)行了走路、跳躍以及拳擊等動(dòng)作進(jìn)行了測試?
從上面可以看出,通過這種方式預(yù)測的姿勢由紅色骨架模型表示,同時(shí)人體運(yùn)動(dòng)的預(yù)測可以實(shí)時(shí)可視化。雖然0.5秒看起來很短,但實(shí)際上在早期的一些格斗游戲中,同樣 30 fps中因?yàn)橐粠鴮?dǎo)致勝負(fù)的情況也有,所以15幀可以說是一個(gè)很大的優(yōu)勢。
之后在實(shí)驗(yàn)中,讓佩戴了HTC Vive的用戶在沒有預(yù)測和有預(yù)測兩種情況下進(jìn)行測試。結(jié)果是,沒有預(yù)測平均反應(yīng)時(shí)間是0.62秒,而有預(yù)測的響應(yīng)是大約0.41秒,這表明有預(yù)測的情況更容易避開攻擊。
此外,在實(shí)際實(shí)驗(yàn)視頻中,確實(shí)反應(yīng)速度會增加,但在現(xiàn)實(shí)情況下,因?yàn)榇竽X處理視覺信息到身體反應(yīng)存在時(shí)滯,因此會造成還差一點(diǎn)點(diǎn)就能躲開但是沒躲開的感覺。雖然總能在超能力戰(zhàn)斗漫畫中看到“我能在幾秒內(nèi)看到未來”的敵人,但到底0.5秒還是太短了,可能還是得需要10多秒。
此外,該研究也適用于在線視頻,實(shí)驗(yàn)證明它也可以預(yù)測足球守門員的動(dòng)作和舞蹈的動(dòng)作。于是我們就可以期待各種各樣的應(yīng)用,比如觀眾在0.5秒前預(yù)測守門員是向左還是向右撲,還有在跳交際舞的時(shí)候通過預(yù)判對方的動(dòng)作,讓舞蹈更流暢。
-
AI
+關(guān)注
關(guān)注
91文章
39793瀏覽量
301454
原文標(biāo)題:先發(fā)制人!東京工業(yè)大學(xué)開發(fā)AI預(yù)測系統(tǒng),可預(yù)測0.5秒后的動(dòng)作
文章出處:【微信號:BigDataDigest,微信公眾號:大數(shù)據(jù)文摘】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
致真精密儀器助力安徽工業(yè)大學(xué)科研團(tuán)隊(duì)發(fā)表重要成果
哈爾濱工業(yè)大學(xué)領(lǐng)導(dǎo)蒞臨美信檢測交流指導(dǎo)
華秋電子 × 河南工業(yè)大學(xué):產(chǎn)教融合再進(jìn)階,共繪電子產(chǎn)業(yè)人才與創(chuàng)新雙循環(huán)新圖景
華秋電子攜手河南工業(yè)大學(xué)推動(dòng)電子產(chǎn)業(yè)高質(zhì)量發(fā)展
產(chǎn)教融合新落地!維視智造與安徽工業(yè)大學(xué)共建智能視覺實(shí)驗(yàn)室
基于全局預(yù)測歷史的gshare分支預(yù)測器的實(shí)現(xiàn)細(xì)節(jié)
內(nèi)蒙古工業(yè)大學(xué)選購我司差示掃描量熱儀及導(dǎo)熱系數(shù)測試儀
西北工業(yè)大學(xué)一行到芯派科技調(diào)研
西北工業(yè)大學(xué):實(shí)現(xiàn)航天器柔性傳感系統(tǒng)首次在軌驗(yàn)證
北京工業(yè)大學(xué)機(jī)械類學(xué)子赴昱櫟技術(shù)開展深度研學(xué)
金晟達(dá)電路與哈爾濱工業(yè)大學(xué)深化產(chǎn)學(xué)研合作
哈爾濱工業(yè)大學(xué)與華為舉行智慧校園創(chuàng)新成果發(fā)布會
湖北工業(yè)大學(xué)與新銳科創(chuàng)共探產(chǎn)學(xué)研前景
上海第二工業(yè)大學(xué)選購我司數(shù)顯懸臂梁沖擊試驗(yàn)機(jī)
東京工業(yè)大學(xué)開發(fā)AI預(yù)測系統(tǒng) 可預(yù)測0.5秒后的動(dòng)作
評論