Meta 和纽约大学在商业机器人中安装开源 AI用于打扫房间

机器人2024-02-192224服务机器人

人工智能领域的专家预测,未来十年内,家务劳动将逐步由机器人来承担。然而,目前面临的主要挑战在于,难以研发出能够适应各种家庭环境的通用型机器人。为了解决这一难题,纽约大学和Meta的AI研究人员正在采用开源代码,教导机器人在陌生的室内环境中执行清洁任务。他们的努力有望推动家用机器人技术的进一步发展,让机器人更好地融入我们的日常生活。

仅借助开源人工智能技术,研究人员成功实现了一个商业机器人在从未涉足过的陌生房间中自主寻找并移动物体的壮举。这一创新性的应用展示了开源AI在推动机器人技术发展方面的巨大潜力,为未来的家居自动化和智能化开辟了新道路。

由Shafiullah共同领导的一项新研究,汇聚了纽约大学和Meta的人工智能研究精英,揭示了我们可能比先前认为的更接近家用机器人的广泛应用。该研究团队仅借助开源软件,成功改造了一款商用机器人,使其能够在从未涉足的陌生房间中自如地移动物体。他们为这一创新系统命名为“OK-Robot”,并在预印本服务器arXiv上分享了详尽的论文,向全球展示了这一前沿技术的魅力与潜力。

“只需用自然语言告诉机器人要选择什么以及把它放在哪里,它就会做到,”与Shafiullah共同领导这项研究的Lerrel Pinto在推特上写道。

工作原理

 

OK-Robot系统的核心是一个名为Stretch的机器人,您仅需支付19,950美元(运费和税费另计)即可拥有它。Stretch的设计独具匠心,拥有轮式底座、垂直杆以及可在杆上自由滑动的机械臂。机械臂的末端装备了抓手,使机器人能够轻松抓取各种物体。

为了将Stretch打造成为可以与人类对话的智能伙伴,研究团队为其融入了视觉语言模型(VLM)。这是一种经过精心训练的人工智能技术,能够理解图像和文字。此外,团队还为Stretch配备了预先训练的导航和抓取模型,进一步增强了其智能化能力。

在实际应用中,研究人员利用iPhone应用程序Record3D,轻松创建了一个房间的3D视频,并与Stretch进行了共享。这一过程仅耗时约六分钟。随后,他们只需向Stretch发送一个文本命令,指示它将房间内的物体移动至新位置。Stretch便能迅速识别目标物体,并准确将其移动至指定位置。

 

他们在10个不同的房间中对OK-Robot进行了严格的测试。在每个房间中,他们精心挑选了10-20个适合机器人抓手的物体,并向其发出指令,要求它逐一将这些物体移动到房间的另一个区域。这些指令包括“将汽水罐移到盒子上”或“将桌子上的塔基斯移到床头柜上”等。

经过综合评估,机器人在测试中的总体任务完成率为58.5%。然而,当他们在相对整洁的房间中重复这一测试时,机器人的成功率显著提升至82.4%。这一结果表明,OK-Robot在有序的环境中表现更为出色,能够更准确地执行各种任务。

显示一个国家/地区人口数量的图表。

展望未来

 

尽管OK-Robot目前仅能执行单一任务,并且其成功率仍有待提高,但其卓越的适应性令人印象深刻。该机器人完全依赖于现成的模型,无需经过特殊培训即可在新环境中迅速投入工作——仅需一段房间的视频资料。这一特点不仅简化了操作过程,更展示了OK-Robot的巨大潜力。

研究团队接下来的目标是开源他们的代码,以便更多的开发者能够在此基础上进行创新与优化。这一举措预计将极大地推动家用机器人技术的发展,并有望使我们比预期更早地享受到智能家务助手带来的便利。

“我相信,一旦人们开始认识到家用机器人的巨大潜力,这个领域将迎来更多创新与突破。”Shafiullah充满信心地表示。