只需不到10小时训练,AI就能教会机器人如何开瓶
拥有双臂的机器人如何去完成像打开瓶盖这样的任务呢?按理说,应该与人类动作流程差不多:它需要先用一只手握住瓶子的底部,然后用另一只手抓住瓶盖并将其拧下来。这种高层次的步骤序列就是我们所熟知的模式,而且它不受操控对象的几何和空间状态影响。另外一个好处是,与旨在通过学习策略来解决任务的强化学习技术不同,模式不需要在数小时、数周甚至数月的学习过程中摄取数以百万计的示例进行训练。
最近,Facebook AI研究院(FAIR)的一个团队试图向两个机器人Sawyer手臂灌输从库中选择适当技能步骤以完成目标的能力。在每个时间步骤里,这两个机器手臂必须决定使用哪种技能以及使用哪些参数(例如施加力的位置、用力程度或移动这些目标的姿势)。尽管涉及到许多复杂的问题,但该团队表示,他们的方法提高了学习效率,使得机器人在经过短短几个小时的培训后就可以获得操纵对象的技能。
Facebook研究团队获得的关键经验是,对于许多任务,学习过程可以分为两个部分:1)学习任务模式;2)学习为不同技能选择适当参数化的策略。他们断言,这种方法会促使机器人获得更快的学习效率,部分原因是来自给定任务的不同版本数据可以用于提高共享技能。此外,这种方法允许在相关任务之间转移学习模式。
图2:Facebook AI研究院的机器人手臂
详细介绍这项研究的论文的合著者解释称:"举例来说,假设我们已经学会了一个很好的模式,可以在模拟过程中拾取一个长条。在那里我们可以了解操作对象的姿势、几何形状以及更多信息。然后,我们可以在相关任务中重复使用该模式,例如在现实世界中仅从原始图片观察中拾取托盘,即使状态空间和最佳参数化(例如抓取姿势)都有很大不同。由于模式是固定的,因此托盘拾取任务的策略学习将非常有效,因为它只需要学习每项技能的参数。"
研究人员为上述两个机器臂提供了一个通用的技能库,如扭转、举起和伸手,它们必须将这些技能应用于几个涉及不同对象、几何形状和初始姿势的横向提升、拾取、打开和旋转任务中。通过使用低维输入数据,如几何和本体感受特征(关节位置、关节速度、末端效应器姿势)进行训练,在MuJoCo(模拟环境)中学习模式,然后在模拟和现实世界中将其转换为视觉输入操作。
在实验过程中,Sawyer手臂配备了摄像头,并由Facebook的PyRobot开源机器人平台控制,其任务是操纵9个家庭物品(如滚针、足球、玻璃罐和T形扳手),这些物品需要两个平行的下颚夹钳才能与之交互。尽管不得不从原始的视觉图像中学习,但他们表示,其AI系统使用2000种技能学习操作大多数对象,在大约4到10个小时的培训中,成功率超过90%。
研究人员写道:"我们已经研究了如何利用与状态无关的技能序列来极大地提高无模型强化学习的样本效率。此外,我们已经在实验中证明,将在模拟中学到的技能序列转移到现实世界的任务中,使我们能够非常有效地解决图像中的稀疏奖励问题,从而使训练真正的机器人执行复杂技能成为可能。"(选自:VentureBeat作者:Kyle Wiggers编译:网易智能参与:小小)
中国人工智能专利排名超过美国中国企业过去3年在日经人工智能专利50强榜单上异军突起,领先于美国同行,扩大了他们在这个全球最重要高科技领域的触角。在2016至2018年间,该榜单中的上榜中国企业从8家增加到19
患病祖父竟是被机器人告知生命垂危,家属怒了本周,加州某医院通过一台机器人向一名78岁的病人传达了其生命垂危的消息,这促使该病人的家人将他们的失望与恼怒公之于众。病人的孙女安纳莉丝雅威廉哈姆向今日美国透露,他的祖父欧内斯特昆
一文了解AI芯片市场走向未来GPU收益或滑落第二曾是弃儿的人工智能,如今,已经蓬勃发展了很长一段时间了。现在,人们对提供高性能视觉识别匹配或甚至超越人类技能的产品和技术产生了浓厚的兴趣和投资。同样,语音和音频识别正变得越来越普遍
孙正义人工智能将在30年内彻底改变人类生活方式据美国财经网站CNBC报道,软银CEO孙正义(MasayoshiSon)日前表示,人们应该为人工智能(AI)的发展做好准备,因为它将在30年内改变我们的生活方式。孙正义今日在接受C
难倒笔迹鉴定专家?这位AI机器人能模仿任何人笔迹人类通常认为十分简单的日常任务,比如写字,对于机器人来说却代表着异常艰巨的挑战。现在,名为笔迹公司(TheHandwritingCompany)的初创企业希望帮助解决这个问题。笔迹
太空探索的未来,看看这位不吃不喝不怕辐射的AI机器战士人工智能(AI)正以惊人的速度发展,并正迅速赶上人类智能(HI)。从单一用途的狭义人工智能(ANI)发展到通用人工智能(AGI),能够独立思考行动和做出决策的智能机器人将很快成为现
带触控的俄罗斯套娃LG获得家用智能机器人专利美国专利商标局(USPTO)已授予LG电子设计一个家用机器人的专利,外观上像是我们小时候玩过的不倒翁,它的前面还有一个小小的屏幕来显示信息。作为一个现代家庭的智能机器人,LG还没有
华为AI音箱新技能升级支持召唤小冰IT之家1月28日消息根据华为官方的消息,华为与微软展开在人工智能语音助手领域的合作,现在小艺可以召唤小冰。通过华为AI音箱,用户可以直接和微软小冰进行交流与互动。据介绍,不仅是华
AI还原手冢治虫画风和思想明年或将出虚拟新作IT之家10月5日消息日前,东芝半导体功能公司公布了一项最新的AI技术TEZUKA2020(手冢2020),这项AI技术通过学习已故日本知名漫画家手冢治虫作品,学习其画风和思想,真
计算资源持续垄断化,AI前沿研究何去何从?从大型机到个人电脑,从互联网到智能手机,计算机技术的每一个重大进步都为更多的人在数字前沿创造了机会。但越来越多的人担心,科技行业的新前沿人工智能,正在逆转这一趋势。计算机科学家表示
618大促买智能音箱?这些天猫精灵们你不能错过618大促期间,天猫精灵官方旗舰店开启了促销活动,包括天猫精灵CC天猫精灵方糖R天猫精灵Queen智能语音美妆镜等等产品都有不同程度的促销降价,其中天猫精灵CC更是最高直降200元