昆仑万维 Matrix-Game

Matrix-Game 2.0 (Skywork open-source real-time interactive world model)进阶

昆仑万维 Skywork 开源的实时可交互世界模型，按键鼠操作逐帧生成游戏画面。

Matrix-Game 是昆仑万维旗下 Skywork AI 开源的可交互世界模型系列，1.0 版 2025 年 5 月发布，2.0 版 2025 年 8 月发布。模型读入当前画面和用户每一帧的键盘、鼠标操作，接着生成下一段视频，从而得到一个边玩边生成的游戏世界。2.0 的要点有三：用虚幻引擎和 GTA5 环境自动采集约 1200 小时带交互标注的视频；把键鼠动作逐帧注入模型；把扩散模型蒸馏成少步的因果自回归生成器，以 25 FPS 实时生成分钟级视频，权重和代码均开源。2026 年 3 月底发布的 3.0 版加入基于相机位置的长时记忆，用 5B 模型做到 720p、40 FPS。这类模型与 Genie 3 同属一条路线，被视为机器人仿真和数据生成的潜在工具。