一小时不崩!蚂蚁灵波开源实时世界模型720p/60fps

实时世界生成尽管在游戏引擎、数字孪生和自动驾驶仿真中需求迫切,却长期受限于生成质量、交互延迟和长时稳定性——大多数模型在数分钟内画质便开始崩坏。蚂蚁灵波团队开源的 LingBot-World 2.0 打破了这一瓶颈:一个仅有14B参数的因果世界模型,能够以720p/60fps分辨率稳定输出长达一小时的高清交互画面,且画质全程不衰减。这一成果直接挑战了传统引擎依赖手工资产和离线渲染的范式,为实时、动态、可演化的虚拟世界提供了全新的AI原生方案。

模型的核心技术框架包含三个层级。底层是 因果预训练范式混合双向自回归注意力掩码(MoBA),前者让模型学会时序因果世界动力学,后者则在保持生成连贯性的同时大幅提升计算效率。中层是双Agent系统:Pilot Agent 负责实时处理玩家输入(如施法、攻击、跳跃等角色动作)并驱动世界状态变化,Director Agent 则根据文本事件(如“切换场景”“召唤风暴”)主动触发世界演化,实现内容从“被动响应”到“主动编排”的跨越。上层是用户体验优化层:通过一致性蒸馏与分布匹配蒸馏(DMD)将采样成本降低约40%,结合注意力kernel优化、混合并行推理、动态KV缓存调度与异步流媒体传输,端到端延迟控制在感知阈值内,多人同时交互时仍保持流畅。

值得强调的是,该模型已开源权重与推理代码(非商用协议),SGLang 即时支持部署。游戏开发团队可直接在Reactor PC客户端或灵光APP中体验实时交互效果。对于开放世界游戏开发者,这意味着无需再为每个场景手动建模、烘焙光照,只需自然语言描述即可生成可交互的动态世界;自动驾驶仿真团队同样可受益于其小时级稳定生成能力,用于生成复杂路况、天气变化的连续视频训练数据。不过,当前版本仍以非商用授权为主,且14B参数规模对本地推理硬件有一定门槛(推荐32GB以上显存)。随着后续模型蒸馏与量化版本推出,这一技术有望成为下一代仿真引擎的标准组件。