实时交互世界模型终于迈过“短命”门槛。蚂蚁灵波开源的LingBot-World 2.0(14B参数)用一小时稳定720p/60fps的实绩,打破了以往生成世界“几分钟必崩”的魔咒。这一突破并非单纯堆算力,而是从训练范式到工程流水线的系统性革新。
模型支持三类交互逻辑:角色自身动作(施法、攻击、跳跃等)、文本驱动事件(如切换场景、召唤风暴),以及多智能体协作演化。内置的Pilot Agent负责控制角色行动,Director Agent则动态调整世界环境,使得玩家不仅能单人沉浸,还能多人同时干预世界走向——这对开放世界游戏和自动驾驶仿真意义重大:前者需要长时一致的环境反馈,后者需要海量可控场景的快速迭代。
技术核心在于因果预训练范式与混合双向自回归注意力掩码(MoBA)的结合。传统自回归视频模型生成时误差易累积,数分钟后画面模糊或逻辑断裂。LingBot-World 2.0通过MoBA在部分窗口内允许双向注意力,让模型在生成时参照前后帧约束,从而长期维持画质。实测一小时输出,帧间跳变、纹理漂移等常见退化均未出现。
部署端同样做了系列“降本”手术。采用一致性蒸馏与DMD(扩散模型蒸馏)将采样步数压至个位数,配合注意力kernel优化、混合并行推理、动态KV缓存调度和异步流媒体传输,将端到端延迟控制在可感知阈值以下。代码与权重已以非商用协议开源,SGLang官方已适配,开发者可直接下载体验。蚂蚁灵波还提供了Reactor PC端和“灵光”APP在线试用入口。
纵观行业,此前开源的GameGen、WorldDreamer等模型均未能同时解决长时稳定和实时交互两大难题。LingBot-World 2.0的发布意味着开源世界模型从“Demo级”进入了“准产品级”。对游戏工作室而言,可快速验证开放世界原型;对自动驾驶公司,则能低成本生成高保真边缘场景。不过需注意其非商用许可限制了商业落地的直接使用,但作为研究底座和技术验证平台,价值已足够突出。
开源社区的下一个看点,可能是如何将这类模型的能力泛化到更复杂的物理规则(如流体、弹性体模拟)以及音频/触觉等多模态实时反馈。长时稳定实时世界生成的技术栈正在成型,LingBot-World 2.0提供了一个不低的起跑线。