机器人大讲堂获悉,在紧密模拟真实世界的畅销游戏《我的世界》(Minecraft)中,由商汤科技联合清华大学、上海人工智能实验室等机构研究者们共同提出的通才AI智能体Ghost in the Minecraft(GITM),不但能够玩转《我的世界》,且比以往所有智能体都有更加优秀表现。
此研究向通用人工智能(AGI)方向迈出了重要一步。
广泛的任务覆盖:GITM 在《我的世界》内主世界的所有技术挑战上实现了100%的任务覆盖率(成功解锁了完整科技树的262个物品),而此前所有智能体的总和只能覆盖30%。(以往所有智能体方法包括OpenAI和DeepMind在内总共解锁了78个)
高任务成功率:在最受关注的 “获取钻石” 任务上,GITM取得了67。5%的成功率,相比于目前最佳成绩(OpenAI VPT)提高了47。5%。
极高的训练效率:GITM的训练效率也达到新高度。环境交互步数只需已有方法的万分之一,单一CPU节点训练2天即可完成,远远低于之前OpenAI VPT所需的6480个GPU天或DeepMind DreamerV3所需的17个GPU天。

通才AI智能体GITM玩转《我的世界》游戏,生存模式白手起家,拿到主世界的所有物品,挖钻石不在话下,还能制作附魔书!
GITM还可以进一步应用在《我的世界》更加复杂的任务中,比如生存所需的避难所、农田、铁傀儡,创造自动化设备所需的红石电路、进入下界所需的下界传送门等。
这些任务展示了 GITM 强大的能力和可扩展性,使得智能体能够在《我的世界》中长时间生存、发展,探索更加高级的世界。
研发攻克《我的世界》中所有技术挑战的 AI 智能体GITM,目的是构建一个具备自主学习和掌握整个真实世界技能的通用人工智能方向。
GITM打破了传统以RL为基础的架构,采用大型语言模型(LLM)作为智能体核心的新范式。
项目主页:https://github。com/OpenGVLab/GITM
这一创新也有助于推动通用人工智能(AGI)的研究目标加速实现,发展出能够在开放世界环境中像人一样进行感知、理解和交互的智能体,并为机器人和自动驾驶等产业带来巨大突破和进步,有效解决现实世界中复杂环境和各类长尾问题,推动AI更大规模的产业落地。