广告

麻省理工用更简单的方法教机器人学习新技能

2022-05-09 15:13:16 麻省理工学院 阅读:
随着电商的蓬勃发展,自动化仓库机器人市场也迎来了爆发,也进一步提高了机器人在拣选速度方面的要求。麻省理工学院研究人员开发的一项新技术只需要少数人类演示即可重新编程机器人。这种机器学习方法使机器人能够拾取和放置从未遇到过的随机姿势的从未见过的物体。在 10 到 15 分钟内,机器人将准备好执行新的拾取和放置任务。

随着电商的蓬勃发展,自动化仓库机器人市场也迎来了爆发,也进一步提高了机器人在拣选速度方面的要求。5qgednc

一个仓库机器人从货架上拿起杯子,并把它们放进箱子里进行运输。一切都在顺利进行,直到机器人遇到一个变化,它现在必须抓起更高更窄的杯子, 而这些杯子是倒着存放的。5qgednc

重新编程该机器人需要手动标记数千张图像,以展示它如何抓住这些新杯子,然后重新训练系统。5qgednc

但麻省理工学院研究人员开发的一项新技术只需要少数人类演示即可重新编程机器人。这种机器学习方法使机器人能够拾取和放置从未遇到过的随机姿势的从未见过的物体。在 10 到 15 分钟内,机器人将准备好执行新的拾取和放置任务。5qgednc

该技术使用专门设计用于重建 3D 对象形状的神经网络。只需几次演示,该系统就可以使用神经网络学到的关于 3D 几何的知识来抓取与演示中的对象相似的新对象。5qgednc

在模拟中并使用真实的机械臂,研究人员表明,他们的系统可以有效地操纵以随机姿势排列的从未见过的杯子、碗和瓶子,仅使用 10 次演示来教机器人。5qgednc

“我们的主要贡献是能够更有效地为需要在可能存在很多可变性的非结构化环境中运行的机器人提供新技能。通过构造进行泛化的概念是一种令人着迷的能力,因为这个问题通常要困难得多,”电气工程和计算机科学 (EECS) 研究生、该论文的共同主要作者 Anthony Simeonov 说。5qgednc

Simeonov 与共同主要作者、EECS 研究生 Yilun Du 共同撰写了这篇论文;Google Brain 的研究科学家 Andrea Tagliasacchi;Joshua B. Tenenbaum,Paul E. Newton 脑与认知科学系认知科学与计算职业发展教授,计算机科学与人工智能实验室 (CSAIL) 成员;Alberto Rodriguez,机械工程系 1957 届副教授;CSAIL 教授 Pulkit Agrawal 和 EECS 新任助理教授 Vincent Sitzmann 和资深作者。该研究将在机器人与自动化国际会议上发表。5qgednc

教机器人学习3D几何形状

机器人可能会被训练去捡起一个特定的物品,但如果那个物体侧躺着(可能是摔倒了),机器人会认为这是一个全新的场景。这是机器学习系统很难泛化到新的面向对象的原因之一。5qgednc

为了克服这一挑战,研究人员创建了一种新型神经网络模型,即神经描述符字段 (NDF),它可以学习一类物品的 3D 几何形状。该模型使用 3D 点云计算特定项目的几何表示,3D 点云是一组数据点或三维坐标。数据点可以从提供物体和视点之间距离信息的深度相机获得。虽然网络在合成 3D 形状的大型数据集上进行了模拟训练,但它可以直接应用于现实世界中的对象。5qgednc

该团队设计了具有称为等方差的属性的 NDF。有了这个属性,如果模型显示一个直立杯子的图像,然后在其侧面显示同一个杯子的图像,它就知道第二个杯子是同一个对象,只是旋转了。5qgednc

“这种等效性使我们能够更有效地处理观察到的物体处于任意方向的情况,”Simeonov 说。5qgednc

随着 NDF 学习重建相似对象的形状,它还学习关联这些对象的相关部分。例如,它知道杯子的把手是相似的,即使有些杯子比其他杯子更高或更宽,或者把手更小或更长。5qgednc

“如果你想用另一种方法做到这一点,你必须手工标记所有部件。相反,我们的方法会自动从形状重建中发现这些部分,”杜说。5qgednc

研究人员使用这个训练有素的 NDF 模型来教机器人一项新技能,只需几个物理示例。他们将机器人的手移动到他们希望它抓住的物体的一部分上,比如碗的边缘或杯子的把手,并记录指尖的位置。5qgednc

Du 解释说,由于 NDF 已经了解了很多关于 3D 几何和如何重建形状的知识,它可以推断出新形状的结构,从而使系统能够将演示转移到任意姿势的新对象上。5qgednc

最高成功率为 85%

他们在模拟中以及使用杯子、碗和瓶子作为对象的真实机械臂上测试了他们的模型。他们的方法在新方向的新对象的拾取和放置任务上的成功率为 85%,而最佳基线只能达到 45% 的成功率。成功意味着抓住一个新物体并将其放置在目标位置,就像将杯子挂在架子上一样。5qgednc

许多基线使用 2D 图像信息而不是 3D 几何,这使得这些方法更难以整合等方差。这是 NDF 技术表现如此出色的原因之一。5qgednc

虽然研究人员对其性能感到满意,但他们的方法仅适用于其训练的特定对象类别。被教导拿起杯子的机器人将无法拿起盒子或耳机,因为这些物体的几何特征与网络所训练的差异太大。5qgednc

“在未来,将其扩展到多个类别或完全放弃类别的概念将是理想的,”Simeonov 说。5qgednc

他们还计划使系统适应非刚性物体,从长远来看,使系统能够在目标区域发生变化时执行拾取和放置任务。5qgednc

据悉,这项研究得到了美国国防高级研究计划局、新加坡国防科学技术局和国家科学基金会的支持。5qgednc

参考链接:An easier way to teach robots new skills;Demi Xia编译5qgednc

责编:Demi
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 商务部暂停天然砂对台湾地区出口,对其半导体制造产业有 据EDN电子技术设计了解,商务部网站8月3日早晨8点发布最新消息,表示将从即日起暂停天然砂对台湾地区出口。不少网友认为暂停天然砂对台湾地区的出口,此举将严重影响台湾的建筑业,实则影响不仅仅如此。台湾地区天然砂进口量的90%以上来自大陆,而台湾芯片占台湾2021年出口额的34.8%。网友称商务部暂停天然砂对台湾地区出口是捏到了台湾半导体制造业的七寸。
  • 华盛顿大学首创用人体热能为可穿戴电子设备供电 从健康和健身追踪器到虚拟现实设备,可穿戴电子产品已成为我们日常生活的一部分,但找到持续为这些设备供电的方法是一项挑战。华盛顿大学的研究人员开发了一种创新的解决方案:首创的柔性、可穿戴热电设备,可将体热转化为电能。
  • 深圳允许完全自动驾驶车辆上路,主驾无需坐人 据EDN电子技术设计引援央视财经报道,从8月1日开始,《深圳经济特区智能网联汽车管理条例》正式实施,智能网联汽车列入国家汽车产品目录或者深圳市智能网联汽车产品目录,这也让深圳成为了国内首个允许L3级别自动驾驶车辆合法上路的城市。
  • 理想ONE高速起火烧成光架,其1.2T三缸增程器曾被指隐藏 近期,网络平台上发布了一段理想ONE在行驶过程中,车辆出现起火的视频内容。现场拍摄的灭火后图片显示,该轿车过火后仅剩骨架,车辆前部增程器位置受损严重,车辆尾门已经在过火后从车身主体脱落。此前,曾有国内汽车媒体对一台行驶了10万公里的理想ONE的东安1.2T三缸增程发动机进行拆解,被指隐藏暗病。
  • 上海微系统所使用石墨烯纳米带研制出世界上最小尺寸的 非易失性相变随机存取存储器(PCRAM)被认为是大数据时代新兴海量存储的有希望的候选者之一。然而,相对较高的编程能量阻碍了 PCRAM 中功耗的进一步降低。利用石墨烯的窄边接触可以有效降低每个电池中相变材料的活性体积,从而实现低功耗运行。
  • 可解决工业自动化和IIoT挑战的MCU 工业自动化和工业物联网(IIoT)设计人员的性能要求不断变化。就MCU而言,他们希望获得更快的处理速度、更多的内存、更好的连接性和更多的安全功能。
  • 我国建成开通5G基站数达185.4万个 工信部近日透露,截至2022年6月底,中国5G基站数达到185.4万个,其中二季度新增基站近30万个,已建成全球规模最大、技术领先的网络基础设施,实现“县县通5G、村村通宽带”。。
  • 苹果发布2022财年第三财季业绩,营收829.59亿美元 Apple 今日公布了 2022 年第三财季的财务业绩。报告显示,苹果公司第三财季公布收入为 829.59亿美元,去年同期为 814 亿美元,同比增长2%;季度净利润为 194 .4亿美元,去年同期为217 亿美元,同比下降10.6%;其中,iPhone带来的营收406.7亿美元,同比增长3%。
  • 工程师开发出可以看到身体内部的贴纸 麻省理工学院的工程师设计了一种贴片,可以产生身体的超声图像。这种邮票大小的设备贴在皮肤上,可以提供 48 小时内脏器官的连续超声成像。
  • 美国参议院批准价值2460亿美元的芯片法案 美国参议院周三通过立法,以超过 750 亿美元支持国内半导体产业。GlobalFoundries、英特尔、三星代工厂、德州仪器、台积电和其他在美国建立半导体制造设施的公司或将受益。
  • 第三代半导体——碳化硅材料之制程与分析 SiC功率电子是加速电动车时代到来的主要动能。以SiC MOSFET取代目前的Si IGBT,不仅能使电力移转时的能源损耗降低80%以上,同时也可让芯片模块尺寸微缩至原本的1/10,达到延长电动车续航里程及缩短充电时间的功效。
  • 开源软件真的可靠吗? 乍看之下,采用开源软件似乎是个不错的办法,但归根究底,开源软件有几个特性可能会使其变得“邪恶”...
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了