美国加州大学伯克利分校、西蒙弗雷泽大学和乔治亚理工学院的联合机器人团队最近创建了一种强化学习模型,能让四足机器人以守门员的身份高效踢足球。在arXiv上预先发表的一篇论文中介绍的该模型,通过反复试验不断提高了机器人的技能。
研究人员称,通过让四足机器人踢足球,可突破四足机器人的人工智能极限。守门员是一项有趣但具有挑战性的任务,它需要机器人对快速移动的球作出反应,有时需在空中飞行,并在很短的时间内(通常在一秒钟内)动态拦截它。
新研究的主要目标是创造一个四足机器人守门员,它可像人类守门员一样在比赛中完善其技能。为此,研究人员开发了一种强化学习模型,让该模型通过试错而不是固定的人工设计策略来训练机器人。
研究人员解释说,机器人首先学习不同的运动控制策略来执行不同的技能,例如躲避、前扑和跳跃,同时记录机器人脚趾的随机轨迹。基于这些控制策略,机器人接着学习高级规划策略,在检测到球的位置和自身状态后,选择最佳技能和动作来拦截球。
经过一系列模拟足球比赛,团队训练了强化学习模型。随后他们将它学到的策略部署在麻省理工学院开发的四足机器人Mini Cheetah上,并在现实世界中测试了它的性能。
研究表明,强化学习框架可极大地提高Mini Cheetah作为足球守门员的能力。在真实世界测试的40次随机射门中,机器人扑救成功率达87.5%。
研究人员称,此项工作最酷炫的是,四足机器人Mini Cheetah能执行跳跃和前扑等非常敏捷的运动技能,以及快速和精确的操作技能,例如在一瞬间摆动机器腿把球推开。这实际上突破了机器人领域“腿运动”的界限,表明腿也可以是一个机械手。
由于该模型可提高四足机器人的敏捷性和身体能力,因此这些机器人还可用于处理完全不同的任务,例如搜索和救援任务。也许不久的将来,四足机器人也可与人类足球运动员同场竞技。
总编辑圈点
踢球和守门有多难?对某些球队来说,确实很难,但对机器人来说,更不容易。其实,大多数人类做起来流畅自如、浑然天成的运动动作,对机器人来说都可能是技术上的重大障碍。这就是“算法”与“天然”之间的鸿沟。现在,工程师们尝试用机器学习跨越这道鸿沟,不是预先编好程序,而是让人工智能在练习和试错中,逐渐掌握动作。最终,连机器人都成了不错的守门员。(科技日报记者 张梦然)
据《自然·材料》杂志10月封面文章,美国科学家在研究一种铋基拓扑材料时,首次在室温下观察到了拓扑绝缘体内的独特量子效应,有望为下一代
一项关于大脑可塑性和视觉感知的研究发现,儿时接受过切除一半大脑手术的人,80%以上的时间都能准确识别出两个单词或两张脸之间的差异。考
27日发表在《干细胞报告》杂志上的一项研究表明,干细胞衍生的甲状旁腺类器官(PTO)可能为未来的生理学研究和药物筛选应用铺平道路。此次研
美国加州大学伯克利分校、西蒙弗雷泽大学和乔治亚理工学院的联合机器人团队最近创建了一种强化学习模型,能让四足机器人以守门员的身份高效
据《自然·材料》杂志10月封面文章,美国科学家在研究一种铋基拓扑材料时,首次在室温下观察到了拓扑绝缘体内的独特量子效应,有望为下一代
一项关于大脑可塑性和视觉感知的研究发现,儿时接受过切除一半大脑手术的人,80%以上的时间都能准确识别出两个单词或两张脸之间的差异。考
27日发表在《干细胞报告》杂志上的一项研究表明,干细胞衍生的甲状旁腺类器官(PTO)可能为未来的生理学研究和药物筛选应用铺平道路。此次研
记者27日从中国科学技术大学获悉,该校潘建伟、陆朝阳、张强等与济南量子技术研究院等单位的科研人员合作,在国际上首次关闭定域性、测量独
记者27日从中国科学技术大学了解到,由该校物理学院单旭副教授为主任设计师,地球和空间科学学院和物理学院组成的空间等离子体科学探测载荷
醇无溶剂催化氧化是合成精细化学品的绿色途径。其中,钯基催化剂因其优异的催化活性而得到广泛研究和应用。日前,中国科学院山西煤炭化学研
记者10月26日从中国航天科技集团六院获悉,我国首型高空型泵后摆大推力液氧煤油发动机近日进行了300秒长程试车,取得圆满成功。该发动机具
我国科研人员依托中国锦屏深地核天体物理实验装置(简称JUNA),于2021年直接测量了关键核天体反应——氟辐射俘获质子的突破反应截面,将测量
日本科学家在最新一期《自然·通讯》杂志上撰文称,他们创造出了首个由准粒子构成的玻色—爱因斯坦凝聚态(BEC),最新研究将对包括量子计算
旗袍,中国和世界华人女性的传统服装,被誉为中国国粹和女性国服。虽然其定义和产生的时间至今还存有诸多争议,但它仍然是中国悠久服饰文化
7月21日,北京市政府发布《北京市电影局关于在疫情防控常态化条件下有序推进电影院恢复开放的通知》,宣布全市低风险地区影院,可于7月24日
武汉7·16渡江节组委会14日发布公告,由于长江武汉关水位超警戒水位,按照规定取消2020年第46届武汉7·16渡江节。受近期持续强降雨影响,
过去一段时间,国家级非遗项目灰塑传承人邵成村,多次在陈家祠等工作现场,向身边那些带着好奇目光的人们讲解灰塑的种种技术细节:草根灰、
7月13日,位于璧山区南门唐城夜市街区的璧山冷酒夜市开街。这是璧山区打造夜间经济消费载体、培育夜间经济活动品牌的举措之一。璧山市民一