99国产精品欲av蜜臀,可以直接免费观看的AV网站,gogogo高清免费完整版,啊灬啊灬啊灬免费毛片

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

僅依靠強化學習,機器狗能當羽毛球搭子了!還涌現(xiàn)出類人回位行為

0
分享至

衡宇 發(fā)自 凹非寺
量子位 | 公眾號 QbitAI

來和機器狗一起運動不?你的羽毛球搭子來了!

無需人工協(xié)助,僅靠強化學習,機器狗子就學會了羽毛球哐哐對打,就像這樣——

在室外:



在室內(nèi):



都不在話下。

基于強化學習,研究人員開發(fā)了機器狗的全身視覺運動控制策略,同步控制腿部(18個自由度)移動,和手臂揮拍動作。

最終呈現(xiàn)出來的表現(xiàn)不賴,狗子最高揮拍速度達到12米/秒。

在與人類選手的協(xié)作比賽中,某一回合連續(xù)擊球10次,甚至涌現(xiàn)出如擊球后回位中心的類人行為。

該研究在各種環(huán)境中進行了大量實驗,驗證了四足機器人預測羽毛球軌跡、有效導航服務區(qū)域,以及對人類球員進行最精準打擊的能力。

證明了足式移動機器人在復雜和動態(tài)的體育場景中應用的可行性



研究背后團隊來自蘇黎世聯(lián)邦理工學院

相關(guān)論文剛剛發(fā)表在Science旗下子刊Science Robotics上。



羽毛球“大戰(zhàn)”中涌現(xiàn)出類人行為

學會打羽毛球的機器狗是什么配置?

公開數(shù)據(jù)如下:

主體由一個四足ANYmal-D底座一個動態(tài)手臂DynaArm組成。

配備了一個帶有全局快門的ZED X立體相機用于羽毛球感知。相機在坐標系中計算出的羽毛球位置,預測攔截位置,這個值和機器人本體感知觀測值一起被喂給強化學習策略。

然后生成關(guān)鍵指令,來控制四足底座。

此外,羽毛球拍相對于腕關(guān)節(jié)呈45°角定向。研究人員表示,根據(jù)早期對不同朝向的仿真測試,這被證明是最有效的配置。

如下圖所示,在部署過程中,狗子以400 Hz的頻率運行,同時機器人控制策略以100 Hz的速率更新觀測值并發(fā)送關(guān)節(jié)位置指令。

系統(tǒng)的感知包括羽毛球位置測量、狀態(tài)估計和軌跡預測,它在Jetson AGX Orin模塊上以60 Hz的頻率異步運行。



基于這個配置,狗子和人類業(yè)余羽毛球選手開打了。

整個過程中,雖然存在一些失誤,但狗子還是能夠根據(jù)不同的速度和落點的來球做出適當反應

平均來說,感知模塊在對手機球后需要花費0.357秒來判斷攔截軌跡。通常,羽毛球會在0.654秒后達到四足底座上方1.25米然后被攔截。

記錄中,狗子從預測到擊球最快耗時0.367秒。

狗子和人類打得有來有回——沒錯,它能夠進行連續(xù)擊球。

在官方放出的視頻中,就有一次對打進行了10次連續(xù)擊球



值得一提的是,狗子還涌現(xiàn)了類人行為——

每次擊球后,狗子會自動向球場中心移步。

類似于人類玩家每次擊球過后都會調(diào)整站位和站姿,為下一次擊球做好準備。



在給定真實感知(ground-truth perception)的情況下,研究人員評估了在指令揮拍時間到達攔截位置0.1米范圍內(nèi)(大約是球拍中心到邊緣的距離)的擊球百分比。

仿真結(jié)果表明,在發(fā)球區(qū),狗子攔截來球幾乎一攔一個準,失敗率可忽略不計。

不過,當狗子站在在發(fā)球區(qū)邊界,或者羽毛球直接落在狗子身后時,機器狗預測羽毛球軌跡并成功攔截就變成了一件很有挑戰(zhàn)性的任務。

因為當羽毛球從正上方或正后方接近狗子時,它必須直接向上俯仰。這對機器狗來說很有難度。



上圖中的折線統(tǒng)計圖B,繪制了執(zhí)行的EE速度和最大基座角速度相對于指令速度的曲線。

在執(zhí)行10m/s的揮拍速度時,狗子基本都能跟蹤指令速度;速度超過10m/s時,精度就會下降。

當命令他以19m/s揮拍時,機器狗出現(xiàn)了最高執(zhí)行速度,即12.06m/s。相比之下,業(yè)余羽毛球運動員可以達到20m/s至30m/s的揮拍速度。

如材料與方法部分所述,系統(tǒng)在接近其電流和關(guān)節(jié)速度極限的情況下運行以實現(xiàn)這些指令。此外,更高的指令速度導致基座角速度增加,表明基座姿態(tài)控制與操作器揮動之間存在耦合。



上圖中的C部分顯示了在擊球時間前后球拍與目標位置之間的距離,球拍在指令的擊球時刻精確到達其最近點。

在指令12m/s揮拍時,機器狗執(zhí)行的平均揮拍速度為10.8m/s,平均位置誤差為0.117米。

換句話說,當球拍以目標速度移動時,僅有0.0108秒的偏移。

此外,整個羽毛球大戰(zhàn)中,機器狗會自主學習動態(tài)調(diào)整相機姿態(tài),根據(jù)任務緊迫性動態(tài)調(diào)整步態(tài),包括短距離微調(diào)姿態(tài)、中距離不規(guī)則步態(tài)、長距離類疾馳(Galloping)步態(tài)等。

比如,它以快跑進行遠距離快速攔截,并在近距離回擊時穩(wěn)定,動態(tài)協(xié)調(diào)手臂和腿部。



一種基于強化學習的統(tǒng)一控制策略

打羽毛球的難點,就是需要運動員在步法和上肢運動之間進行復雜的相互協(xié)調(diào)作用。

對機器狗來說,這也是一項需要精確協(xié)調(diào)感知、移動和手臂揮動的任務。

更進一步來說,需要機器狗在動態(tài)環(huán)境中協(xié)調(diào)下肢與上肢之間的運動,并使肢體控制與感知對齊

這對機器狗來說同樣不是一件簡單的事情。



一方面,當前控制器和硬件存在不足;另一方面,羽毛球?qū)Ω兄⒁苿雍筒僮髦g復雜的相互作用提出了極高的要求,需要平衡「快速響應的移動」與「精確的手臂運動」。

盡管在原理上,機器人擁有大量的自由度以實現(xiàn)靈活運動,但在實踐中,這很大程度上取決于控制算法。

在實際應用中,另一種大家熟知的球類——乒乓球,在精確性和策略方面的研究都更為廣泛,這類情況目前主要的解決辦法是使用帶有外部視覺系統(tǒng)的固定基座或龍門式操作器。

相比之下,本研究強調(diào)全身視覺運動技能,并僅依賴機載感知,整合了腿式移動和手臂揮動——這種方法更好地模擬了人類打羽毛球時候的方式

研究團隊提出了一種基于強化學習的統(tǒng)一控制策略

它用于涉及所有自由度的全身視覺運動技能,以實現(xiàn)有效的羽毛球跟蹤和擊打。



該策略由一個利用真實世界相機數(shù)據(jù)的感知噪聲模型提供信息,從而確保仿真與部署之間感知誤差水平的一致性,并促進學習主動感知行為



這為解決教師-學生訓練的一個已知局限提供了方法:

即用完美感知訓練出來的教師策略與用于部署的學生策略之間存在的信息差距。

在這樣的框架中,教師策略沒有動力去學習主動感知行為,因為它已經(jīng)能夠獲得完美的觀測結(jié)果;學生策略則僅基于部分觀測和由本體感知和感知歷史重構(gòu)的潛在向量來模仿這些行為。

因此,兩種策略都沒有發(fā)展出主動感知行為,并且在用于控制的信息上出現(xiàn)了差異。

此外,該方法還包括一個羽毛球預測模型和用于魯棒運動控制的約束強化學習,以增強部署準備度。

與基準相比,在沒有明確的視野范圍獎勵的情況下,機器狗即可實現(xiàn)更低的感知誤差,和更高效的機械功率使用



團隊表示,當前系統(tǒng)主要依賴一個商用立體相機上的擴展卡爾曼濾波器(EKF)進行羽毛球狀態(tài)估計

該方法可以通過整合額外的傳感模態(tài)來改進,例如通過扭矩和聲音進行沖擊檢測,或加入額外的 RGB(紅、綠、藍)、深度或事件相機,以增強機器人在更激烈的游戲場景中的物理交互響應。

鑒于人類球員通常通過觀察對手動作來預測羽毛球軌跡,人體姿態(tài)估計也可能是一種提高策略性能的有價值模態(tài)。

論文直通車:
https://www.science.org/doi/epdf/10.1126/scirobotics.adu3922
參考鏈接:
[1]https://x.com/rohanpaul_ai/status/1928125317228679615
[2]https://www.science.org/doi/10.1126/scirobotics.adu3922#sec-2

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
曝尤文鋒霸自薦轉(zhuǎn)會曼聯(lián),索20萬周薪!轉(zhuǎn)會費只需2000萬吸引拉爵

曝尤文鋒霸自薦轉(zhuǎn)會曼聯(lián),索20萬周薪!轉(zhuǎn)會費只需2000萬吸引拉爵

羅米的曼聯(lián)博客
2025-06-12 11:18:15
阿里巴巴門口雕塑:一個畏畏縮縮的中年男人,提著一個公文包……

阿里巴巴門口雕塑:一個畏畏縮縮的中年男人,提著一個公文包……

翻開歷史和現(xiàn)實
2025-06-07 10:12:32
6月12日譯名發(fā)布:弗拉基米爾·梅金斯基

6月12日譯名發(fā)布:弗拉基米爾·梅金斯基

參考消息
2025-06-12 11:20:18
上海市區(qū)又一新地標!430000㎡超大免費公園煥新開放→

上海市區(qū)又一新地標!430000㎡超大免費公園煥新開放→

上觀新聞
2025-06-11 22:38:14
世界上最大的生物正在死亡,重6000噸,它能活下來嗎?

世界上最大的生物正在死亡,重6000噸,它能活下來嗎?

徐德文科學頻道
2025-06-12 07:31:42
久未露面的蔣勤勤又美上熱搜!網(wǎng)友:這是滿50歲減30?

久未露面的蔣勤勤又美上熱搜!網(wǎng)友:這是滿50歲減30?

木子愛娛樂大號
2025-06-10 20:01:13
你遇到過超級主動的女生是啥樣?網(wǎng)友:為什么沒有女人主動接近我

你遇到過超級主動的女生是啥樣?網(wǎng)友:為什么沒有女人主動接近我

娛樂圈人物大賞
2025-04-10 00:30:23
心黑到什么程度,才敢這樣理直氣壯地打破底線!

心黑到什么程度,才敢這樣理直氣壯地打破底線!

胖胖說他不胖
2025-06-10 14:51:08
發(fā)現(xiàn)好公司:坐擁最大工業(yè)數(shù)據(jù)金礦,中控技術(shù)推出兩大模型,劍指工業(yè)AI龍頭,轉(zhuǎn)型途中業(yè)績承壓

發(fā)現(xiàn)好公司:坐擁最大工業(yè)數(shù)據(jù)金礦,中控技術(shù)推出兩大模型,劍指工業(yè)AI龍頭,轉(zhuǎn)型途中業(yè)績承壓

時代投研
2025-06-10 20:17:37
他擔任局長后,和12個女下屬有染,一個26歲的女人將他拉下馬

他擔任局長后,和12個女下屬有染,一個26歲的女人將他拉下馬

喬生桂
2024-07-01 16:26:12
讀《毛選》后發(fā)現(xiàn),愛自己不是買好看的衣服,而是做到這4點

讀《毛選》后發(fā)現(xiàn),愛自己不是買好看的衣服,而是做到這4點

李舟
2025-06-11 13:04:03
28萬!川美2025屆畢業(yè)設(shè)計就這么水靈靈的賣出啦?

28萬!川美2025屆畢業(yè)設(shè)計就這么水靈靈的賣出啦?

CFW服裝設(shè)計
2025-06-11 16:08:44
特朗普:中美談判完成,美國對華關(guān)稅55%,中國只收10%關(guān)稅

特朗普:中美談判完成,美國對華關(guān)稅55%,中國只收10%關(guān)稅

涼羽亭
2025-06-12 11:31:32
官宣!上海這家三級醫(yī)院“換帥”

官宣!上海這家三級醫(yī)院“換帥”

上觀新聞
2025-06-12 14:09:14
華裔女子用20張圖片表達中西差異!

華裔女子用20張圖片表達中西差異!

霹靂炮
2025-06-09 22:12:29
職工醫(yī)保個人賬戶余額可以轉(zhuǎn)賬啦!

職工醫(yī)保個人賬戶余額可以轉(zhuǎn)賬啦!

子長融媒體中心
2025-05-31 13:15:43
74歲劉曉慶突傳消息!全部取消

74歲劉曉慶突傳消息!全部取消

青城之窗
2025-06-12 11:34:55
意不意外?美國斷供發(fā)動機后,中國C919大型飛機正常生產(chǎn)!

意不意外?美國斷供發(fā)動機后,中國C919大型飛機正常生產(chǎn)!

鋒芒畢露
2025-06-11 20:04:33
獨庫公路現(xiàn)“霸道”黑車,網(wǎng)友:往祖墳挖

獨庫公路現(xiàn)“霸道”黑車,網(wǎng)友:往祖墳挖

野山歷史
2025-06-12 10:08:01
切特登全美第一熱搜:決勝時刻連續(xù)送帽 末節(jié)5中1 美記稱差點氣暈

切特登全美第一熱搜:決勝時刻連續(xù)送帽 末節(jié)5中1 美記稱差點氣暈

顏小白的籃球夢
2025-06-12 11:46:35
2025-06-12 15:36:49
量子位 incentive-icons
量子位
追蹤人工智能動態(tài)
10639文章數(shù) 176167關(guān)注度
往期回顧 全部

科技要聞

一鏡雙目捅破天,華為最快明年Q2超越蘋果

頭條要聞

女生高考后挑行李回家婉拒資助:暑假準備擺攤賣涼粉

頭條要聞

女生高考后挑行李回家婉拒資助:暑假準備擺攤賣涼粉

體育要聞

沒有人會不喜歡TJ-麥康奈爾

娛樂要聞

金秀賢贏了 金賽綸父母“隱藏式”失蹤

財經(jīng)要聞

"特馬"互撕反轉(zhuǎn)?特朗普回應馬斯克反悔

汽車要聞

全面升級 一汽-大眾速騰L有望于三季度上市

態(tài)度原創(chuàng)

教育
房產(chǎn)
健康
時尚
軍事航空

教育要聞

留學變天?特朗普“三十六變”,是新加坡學生闖這個賽道的好時機

房產(chǎn)要聞

曝光!食堂問題頻發(fā),海口這所名校被重罰百萬!

減重專家破解減肥九大謠言!

帶火今年最熱門的鞋,楊冪合影也要靠邊站,這位“漂亮臉蛋”到底什么來頭?

軍事要聞

日方:山東艦艦載機"異常接近"日本軍機

無障礙瀏覽 進入關(guān)懷版 主站蜘蛛池模板: 南开区| 梅州市| 荥阳市| 临西县| 渭南市| 大足县| 治县。| 海城市| 高密市| 剑河县| 铁岭市| 沙坪坝区| 尼勒克县| 叶城县| 邮箱| 会昌县| 西乡县| 印江| 盘锦市| 循化| 牡丹江市| 上思县| 普格县| 勐海县| 南木林县| 读书| 吴忠市| 伊吾县| 平顶山市| 天门市| 栾川县| 高陵县| 桂阳县| 虞城县| 泰兴市| 盖州市| 江川县| 潮州市| 建瓯市| 介休市| 通道|