Meta联合研发家务机器人,能在零人力帮助下自主整理房间
DeepTech深科技
2024-02-02 21:24:32
0

原标题:Meta联合研发家务机器人,能在零人力帮助下自主整理房间

如今,机器人可以很好地完成某些任务。它们非常擅长拾取和移动物体,甚至连烹饪也不在话下。

显然,机器人很容易在实验室里完成这些任务,但让它们在一个几乎没有可用数据的陌生环境中工作才是一个真正的挑战。

现在,一个名为 OK-Robot 的新系统可以训练机器人在从未见过的环境中拾取、移动和放下物体。

(来源:arXiv)

这种方法可能能够填补快速进步的人工智能模型和机器人真实能力之间的差距,因为它不需要任何其他昂贵而复杂的训练。

为了开发该系统,纽约大学和 Meta 的研究人员在五户人家的 10 个房间里测试了 Stretch 机器人,这是一款由 Hello Robot 制造的商用机器人,由轮子、高高的杆子和伸缩臂组成。

当与机器人在一个房间里时,研究人员会使用 Record3D 扫描他们的周围环境,Record3D 是一款 iPhone 应用程序,使用该手机自带的激光雷达系统拍摄 3D 视频并与机器人共享。

OK-Robot 系统会针对视频运行一个开源的人工智能物体检测模型。与其他开源模型相结合,它可以帮助机器人识别房间里的物体,如玩具龙、牙膏、扑克牌、椅子、桌子和垃圾桶等。

然后,研究人员会指示机器人捡起一件特定的物品,并将其移动到一个新的位置。在 58.5% 的情况下,机器人依靠机械臂成功地做到了这一点。

在不那么杂乱的房间里,成功率上升到了 82%。目前,这项研究尚未经过同行评审。

谷歌 DeepMind 的高级计算机视觉研究科学家马蒂亚斯·明德尔(Matthias Minderer)表示,最近的人工智能热潮带来了语言和计算机视觉能力的巨大飞跃,使机器人研究人员能够获得三年前还不存在的开源人工智能模型和工具。

他说:“完全依赖已有模型(就能成功)是很不寻常的,(因此)这项研究令人印象深刻。”

他补充道:“我们看到了一场机器学习革命,它让现在新创建的模型不仅在实验室中有效,而且在开放世界中也很好用。看到它们在真实的物理环境中确实有效,这是非常有用的信息。”

因为研究人员使用的模型没有根据这个特定项目进行微调,所以当机器人找不到指定物体时,它只能停下来等待指令,而不是试图找出解决方案。

这个限制让机器人更有可能在整洁的环境中成功:更少的物体意味着更少的混乱和更清晰的导航路线。

纽约大学计算机科学助理教授莱尔·平托(Lerrel Pinto)表示,使用现成的开源模型有好有坏。

他说:“从积极的方面来看,你不必在新环境中扔给机器人任何额外的训练数据,它可以很快开始工作。

但另一方面,它只能把一个物体捡起来放到其他地方。你不能要求它打开抽屉,因为它只会拿起和放下两个动作。”

纽约大学博士生玛希·沙菲乌拉(Mahi Shafiullah)共同领导了这项研究。他说,通过结合 OK-Robot 与语音识别模型,研究人员可以与机器人交谈并简单地传递指令,从而更容易地使用现成的数据集进行实验。

他说:“在(机器人)社区中,有一种广泛存在的潜规则,家(室内)是很困难的环境,机器人也是很困难的研究领域,而将家庭和机器人结合起来是完全不可能的。我认为,一旦人们开始相信家用机器人是可能的,这个领域就会迎来有更多的成果。”

支持:Ren

运营/排版:何晨龙

相关内容

热门资讯

阿特斯获得发明专利授权:“太阳... 证券之星消息,根据天眼查APP数据显示阿特斯(688472)新获得一项发明专利授权,专利名为“太阳能...
苹果上调土耳其区iCloud+... 【CNMO科技新闻】目前订阅iCloud+服务是很多苹果用户的常态,此前得益于土耳其汇率优势,土耳其...
Siri升级受阻,苹果正探索与... IT之家 8 月 23 日消息,彭博社马克・古尔曼刚刚报道称,苹果近期接触谷歌母公司 Alphabe...
【每周经济观察】“人工智能+”... 从“互联网+”到“人工智能+”,绝非简单的技术迭代,而是一场从连接赋能到认知赋能的深刻变革。它不仅标...
新美星获得实用新型专利授权:“... 证券之星消息,根据天眼查APP数据显示新美星(300509)新获得一项实用新型专利授权,专利名为“一...
重庆明才电力取得电子变压器生产... 金融界2025年8月22日消息,国家知识产权局信息显示,重庆明才电力设备有限公司取得一项名为“一种电...
中驰电器取得平面摇杆夹持机构专... 金融界2025年8月22日消息,国家知识产权局信息显示,余姚市中驰电器有限公司取得一项名为“一种平面...
蜂巢能源取得极耳防损伤电池壳体... 金融界2025年8月22日消息,国家知识产权局信息显示,蜂巢能源科技股份有限公司取得一项名为“极耳防...
云轴科技ZStack入选IDC... 近日,国际数据公司IDC发布了《中国大模型推理算力市场分析报告》(2025年8月),报告分析了当前中...
迎战洪峰!陕西移动榆林神木分公... 阳光讯(记者 李源 通讯员 李娜)近日,受内蒙古强降雨及上游来水影响,陕西省神木市窟野河水位暴涨,沙...
短时强对流天气2小时精准预报!... 近日,中国电信贵州公司与贵州省气象局联合研发基于视频生成跨域迁移技术的短临气象大模型,成功实现对短时...
云手机免费版哪个好用?掌派云手... 云手机免费版是用户“试错”的首选,但市面上很多产品要么时长短、功能阉割,要么卡顿严重。2025年,掌...
iQOO Z10 Turbo ... 在智能手机市场,高性价比机型总是备受关注,而高配版本往往因其出色的性能与储存配置成为消费者的优选。然...
美的取得电控盒和具有其的空调器... 金融界2025年8月22日消息,国家知识产权局信息显示,佛山市顺德区美的电子科技有限公司、广东美的制...
太尴尬!Xbox科隆直播演示翻... 面对持续进行的裁员与内部调整,Xbox近期遭遇诸多挑战。虽然微软在2025年科隆游戏展上保持了强大的...
灵之裕取得具有除尘功能丝印机专... 金融界2025年8月22日消息,国家知识产权局信息显示,灵之裕印刷材料(重庆)有限公司取得一项名为“...
中微公司获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示中微公司(688012)新获得一项实用新型专利授权,专利名为“...
市国土空间数据和遥感技术中心开... 8月22日上午,市国土空间数据和遥感技术中心组织全体职工开展2025年第十期业务技能培训,旨在全面提...
有云数智申请一种异构算力平台负... 金融界2025年8月22日消息,国家知识产权局信息显示,吉林省有云数智科技有限公司申请一项名为“一种...
原创 数... 当下,超高清视频技术已成为全球主流发展趋势,是推动广电视听、网络视听升级的关键力量,纳入国家“两重”...