Matrix-Zero：昆仑万维推出国内第一家3D世界模型

昆仑万维于2025年2月14日推出了Matrix-Zero世界模型，成为国内第一家同时推出3D场景生成和可交互视频生成模型的公司。

该世界模型包括两款子模型：一个是3D场景生成模型，3D场景生成大模型可以将用户输入的图片转化为可自由探索的真实3D场景，具备全局一致性、支持不同风格的图片输入和风格迁移，并能生成动态物理效果。另一个是可交互视频生成大模型，支持用户实时输入生成互动视频效果，并提供精准的视角控制。

Matrix-Zero功能特征

3D场景生成大模型：

• 输入转化：将用户输入的图片转化为可自由探索的真实合理的3D场景。

• 全局一致性：生成的3D场景在360度环视后保持一致，无前后不一致现象。

• 自由探索：支持在场景中进行任意方向的长距离、大范围探索。

• 风格迁移：支持不同风格图片输入，并能生成不同风格的3D场景。

• 动态场景生成：支持光照效果、水花动态、云雾动态等物理效果的生成。

可交互视频生成大模型：

• 用户输入驱动：以用户输入为核心驱动，生成可交互的空间智能视频。

• 精确控制：具备更精准控制的action model，支持用户通过键盘和鼠标进行视角和动作控制。

• 流畅体验：通过滑动窗口机制优化控制体验，减少输入延迟，提高交互流畅性。

• 多类型输入处理：包含离散运动控制模块、连续视角控制模块和3D场景位置追踪模块，处理不同类型的用户输入。

Matrix-Zero应用场景

• 3D游戏开发：提供可控、快速的3D场景建模，提升游戏开发效率。

• 影视制作：支持电影/短剧场景镜头生成，提供更多创作可能性。

• 具身智能：快速搭建模拟场景，提升具身智能的训练和应用效率。

• 虚拟环境和交互式应用：提供沉浸式体验，拓展在虚拟环境和交互式应用中的应用场景。

• ai多矩阵产品：赋能公司AI游戏生产、AI短剧生产和编辑等业务，提升生产力。

空间智能，是AI下一个里程碑，何谓空间智能？在AI教母李飞飞看来，空间智能不仅仅是让AI看见世界，还要让AI理解三维世界，并具备与之互动的能力，最终实现与现实世界的深度交互。

Matrix-Zero预计将于2025年4月上线，并首先应用于昆仑万维的AI游戏生产和AI短剧制作等业务线。