近日，字节跳动Seed团队正式发布了一款名为Lumine的通用AI智能体，该智能体通过在《原神》游戏世界中的训练，具备了实时感知、思考与行动的能力，能够自主完成复杂3D开放世界中长达数小时的任务。这一突破性进展标志着AI在游戏领域的应用迈入新阶段。
在测试中，Lumine展现了令人瞩目的性能。在《原神》蒙德地区，它成功完成了时长五小时、共三幕的主线剧情，尽管其推理训练仅基于第一幕内容，却能自主推进并完整通关整个章节。更令人印象深刻的是，在完全未经训练的璃月区域，Lumine凭借出色的泛化能力，不仅成功抵达并完成璃月港主线任务，甚至拜访了深山中的仙人居所。其跨游戏泛化能力同样卓越，无需任何额外微调或修改，Lumine就成功在《崩坏：星穹铁道》中通关黑塔空间站第一章全部主线任务（约7小时），并在《鸣潮》中完成约100分钟的主线剧情。
技术层面，Lumine采用类人交互范式，将感知、思考与行动端到端统一整合，基于视觉-语言模型驱动。它以5Hz处理原始图像，并以30Hz生成精确的键鼠操作，仅在必要时进行思考。通过三个阶段的学习训练：先用1731小时的人类游戏数据预训练，学会根据游戏画面输出键鼠操作；再用200小时的指令跟随数据，将语言和操作对应；最后用15小时的推理数据，让模型具备灵活思考能力，Lumine最终掌握了在3D开放世界探索和2D图形界面操作中执行各类复杂任务的能力。
得益于大规模的预训练，Lumine不仅能够动态追踪敌人、精准地用弓箭击中远处目标，还能流畅地切换角色进行连招攻击，并高效地寻找并开启战斗后解锁的宝箱。此外，它展现出对Boss机制较强的理解和应对能力，能够躲避攻击并使用对应策略击败Boss。在解谜和NPC交互方面，Lumine也表现出色，其可靠的指令执行能力和强大的上下文学习能力，为完成长期任务奠定了坚实基础。
原创文章，作者：AI，如若转载，请注明出处：https://www.kejixun.co/article/738781.html
