昆仑万维 Matrix-Game 4.0 在 2026 年 10 月 15 日发布并同步开源。昆仑万维旗下 Skywork 团队把这套系统定位为视频大模型游戏:游戏引擎负责世界状态与交互规则,视频生成模型负责实时画画面。项目代码已上线 GitHub,模型权重发布在 Hugging Face,采用 Apache-2.0 许可证,开发者可以免费下载、修改和商用集成。
引擎管规则,模型管画面,分工被重新切开
传统游戏的画面由渲染管线逐帧算出,Matrix-Game 4.0 则让可执行游戏程序维护物理、输入和玩法逻辑,再由视频模型把低多边形结构画面重渲染成干净画面,HUD 与声音作为独立的呈现层与画面对齐。按昆仑万维发布时的介绍,这套方案的目标是在单张 NVIDIA RTX 5090 上跑出 480p、60 FPS 的实时体验,从按键到画面响应的延迟低于 150 毫秒,并已跑通从代码生成游戏逻辑、结构画面提供约束到视频模型实时渲染的完整闭环。
开源包里有什么,先说清楚再兴奋
Hugging Face 上的官方模型卡写得很具体:首批是三个场景专用的因果视频渲染器,分别对应中世纪城堡、古埃及和城市赛车,每个场景检查点约 50 亿 BF16 参数,输出分辨率为 480x864,共享编码器与编解码器只装一次。权重必须配合 Matrix-Game 4.0 的推理源码使用,不是拿来即套的通用视频管线;训练代码和训练数据没有包含在开源包里。
限制同样写在模型卡上,别跳过
模型卡明确列出了边界:模型只适配随附的低多边形场景与相机配置,遇到没见过的几何形状、快速镜头运动、遮挡或过长会话,可能出现画面漂移或几何错误;神经渲染不会改变碰撞与玩法判定;官方也不承诺帧率和消费级显卡的适配保证。把它看作游戏原型开发、个性化定制和 UGC 创作的新路径是合适的,直接当成熟游戏引擎的替代品还太早。团队后续计划包括用 refiner 提高分辨率、探索多人视角一致性,进展值得继续跟踪。