美國加州大學伯克利分校、西蒙弗雷澤大學和喬治亞理工學院的聯合機器人團隊最近創建了一種強化學習模型,能讓四足機器人以守門員的身份高效踢足球。在arXiv上預先發表的一篇論文中介紹的該模型,通過反復試驗不斷提高了機器人的技能。
研究人員稱,通過讓四足機器人踢足球,可突破四足機器人的人工智能極限。守門員是一項有趣但具有挑戰性的任務,它需要機器人對快速移動的球作出反應,有時需在空中飛行,并在很短的時間內(通常在一秒鐘內)動態攔截它。
新研究的主要目標是創造一個四足機器人守門員,它可像人類守門員一樣在比賽中完善其技能。為此,研究人員開發了一種強化學習模型,讓該模型通過試錯而不是固定的人工設計策略來訓練機器人。
研究人員解釋說,機器人首先學習不同的運動控制策略來執行不同的技能,例如躲避、前撲和跳躍,同時記錄機器人腳趾的隨機軌跡。基于這些控制策略,機器人接著學習高級規劃策略,在檢測到球的位置和自身狀態后,選擇最佳技能和動作來攔截球。
經過一系列模擬足球比賽,團隊訓練了強化學習模型。隨后他們將它學到的策略部署在麻省理工學院開發的四足機器人Mini Cheetah上,并在現實世界中測試了它的性能。
研究表明,強化學習框架可極大地提高Mini Cheetah作為足球守門員的能力。在真實世界測試的40次隨機射門中,機器人撲救成功率達87.5%。
研究人員稱,此項工作最酷炫的是,四足機器人Mini Cheetah能執行跳躍和前撲等非常敏捷的運動技能,以及快速和精確的操作技能,例如在一瞬間擺動機器腿把球推開。這實際上突破了機器人領域“腿運動”的界限,表明腿也可以是一個機械手。
由于該模型可提高四足機器人的敏捷性和身體能力,因此這些機器人還可用于處理完全不同的任務,例如搜索和救援任務。也許不久的將來,四足機器人也可與人類足球運動員同場競技。
總編輯圈點
踢球和守門有多難?對某些球隊來說,確實很難,但對機器人來說,更不容易。其實,大多數人類做起來流暢自如、渾然天成的運動動作,對機器人來說都可能是技術上的重大障礙。這就是“算法”與“天然”之間的鴻溝。現在,工程師們嘗試用機器學習跨越這道鴻溝,不是預先編好程序,而是讓人工智能在練習和試錯中,逐漸掌握動作。最終,連機器人都成了不錯的守門員。(科技日報記者 張夢然)
據《自然·材料》雜志10月封面文章,美國科學家在研究一種鉍基拓撲材料時,首次在室溫下觀察到了拓撲絕緣體內的獨特量子效應,有望為下一代
一項關于大腦可塑性和視覺感知的研究發現,兒時接受過切除一半大腦手術的人,80%以上的時間都能準確識別出兩個單詞或兩張臉之間的差異。考
27日發表在《干細胞報告》雜志上的一項研究表明,干細胞衍生的甲狀旁腺類器官(PTO)可能為未來的生理學研究和藥物篩選應用鋪平道路。此次研
美國加州大學伯克利分校、西蒙弗雷澤大學和喬治亞理工學院的聯合機器人團隊最近創建了一種強化學習模型,能讓四足機器人以守門員的身份高效
據《自然·材料》雜志10月封面文章,美國科學家在研究一種鉍基拓撲材料時,首次在室溫下觀察到了拓撲絕緣體內的獨特量子效應,有望為下一代
一項關于大腦可塑性和視覺感知的研究發現,兒時接受過切除一半大腦手術的人,80%以上的時間都能準確識別出兩個單詞或兩張臉之間的差異。考
27日發表在《干細胞報告》雜志上的一項研究表明,干細胞衍生的甲狀旁腺類器官(PTO)可能為未來的生理學研究和藥物篩選應用鋪平道路。此次研
記者27日從中國科學技術大學獲悉,該校潘建偉、陸朝陽、張強等與濟南量子技術研究院等單位的科研人員合作,在國際上首次關閉定域性、測量獨
記者27日從中國科學技術大學了解到,由該校物理學院單旭副教授為主任設計師,地球和空間科學學院和物理學院組成的空間等離子體科學探測載荷
醇無溶劑催化氧化是合成精細化學品的綠色途徑。其中,鈀基催化劑因其優異的催化活性而得到廣泛研究和應用。日前,中國科學院山西煤炭化學研
記者10月26日從中國航天科技集團六院獲悉,我國首型高空型泵后擺大推力液氧煤油發動機近日進行了300秒長程試車,取得圓滿成功。該發動機具
我國科研人員依托中國錦屏深地核天體物理實驗裝置(簡稱JUNA),于2021年直接測量了關鍵核天體反應——氟輻射俘獲質子的突破反應截面,將測量
日本科學家在最新一期《自然·通訊》雜志上撰文稱,他們創造出了首個由準粒子構成的玻色—愛因斯坦凝聚態(BEC),最新研究將對包括量子計算
旗袍,中國和世界華人女性的傳統服裝,被譽為中國國粹和女性國服。雖然其定義和產生的時間至今還存有諸多爭議,但它仍然是中國悠久服飾文化
7月21日,北京市政府發布《北京市電影局關于在疫情防控常態化條件下有序推進電影院恢復開放的通知》,宣布全市低風險地區影院,可于7月24日
?武漢7·16渡江節組委會14日發布公告,由于長江武漢關水位超警戒水位,按照規定取消2020年第46屆武漢7·16渡江節。受近期持續強降雨影響,
過去一段時間,國家級非遺項目灰塑傳承人邵成村,多次在陳家祠等工作現場,向身邊那些帶著好奇目光的人們講解灰塑的種種技術細節:草根灰、
7月13日,位于璧山區南門唐城夜市街區的璧山冷酒夜市開街。這是璧山區打造夜間經濟消費載體、培育夜間經濟活動品牌的舉措之一。璧山市民一