AI在线 AI在线

昆仑万维发布Matrix-Zero世界模型 支持3D场景、可交互视频生成

2025年2月14日,昆仑万维集团正式推出Matrix-Zero世界模型,标志着中国在空间智能领域迈出了重要一步。 Matrix-Zero包含两款子模型:3D场景生成大模型和可交互视频生成大模型,旨在通过AI技术重塑数字内容创作模式,推动影视制作、游戏开发、具身智能等行业的创新发展。 Matrix-Zero的3D场景生成大模型能够将用户输入的图片转化为可自由探索的真实3D场景,支持不同风格的图片输入和风格迁移,并具备动态场景生成能力。

2025年2月14日,昆仑万维集团正式推出Matrix-Zero世界模型,标志着中国在空间智能领域迈出了重要一步。Matrix-Zero包含两款子模型:3D场景生成大模型和可交互视频生成大模型,旨在通过AI技术重塑数字内容创作模式,推动影视制作、游戏开发、具身智能等行业的创新发展。

Matrix-Zero的3D场景生成大模型能够将用户输入的图片转化为可自由探索的真实3D场景,支持不同风格的图片输入和风格迁移,并具备动态场景生成能力。该模型通过场景布局生成模块和纹理生成模块,结合可微渲染和扩散模型技术,确保生成的3D场景全局一致、动态合理,为3D游戏建模和具身智能模拟场景搭建提供了高效解决方案。例如,输入一张“城堡的花园一角”图片,模型可生成360度环视后场景保持不变的3D场景,并支持用户进行长距离、大范围的自由探索。

微信截图_20250214101547.png

与此同时,Matrix-Zero的可交互视频生成大模型以用户输入为核心驱动,结合先进的生成式视频模型和自主研发的用户交互模块,实现了视频内容中视角移动的精确控制。用户可以通过键盘或鼠标输入,控制视频中的视角和运动轨迹,实现前后左右移动以及视角变换等操作。该模型包含离散运动控制模块、连续视角控制模块、3D场景位置追踪模块和滑动窗口机制,确保交互体验的流畅性和连贯性。

昆仑万维作为中国AI领域的领军企业,始终致力于实现通用人工智能,并通过自主研发不断推出创新的AI产品。Matrix-Zero的推出不仅是公司在空间智能领域的重大突破,也是其AI业务矩阵的重要补充。过去三年,昆仑万维在视觉多模态、深度学习等关键技术方向取得了显著成果,并构建了包括天工AI搜索、Mureka音乐创作平台、SkyReels短剧平台等在内的完整AI矩阵。

Matrix-Zero预计将于4月份正式上线,届时将为昆仑万维的AI游戏生产、AI短剧制作等业务带来新的赋能,为用户和开发者提供全新的平台和工具。

相关资讯

从图像出发构建可控交互世界!昆仑万维正式开源Matrix-Game

5月13日,昆仑万维集团宣布正式开源Matrix-Game大模型,这是一款专注于交互式世界生成的先进模型,标志着交互式世界生成技术的新突破。 Matrix-Game是Matrix系列在交互式世界生成方向的正式落地,也是工业界首个开源的10B 空间智能大模型,专为开放式环境中的高质量生成与精确控制而设计。 这一开源举措不仅刷新了交互式世界生成的技术上限,也为构建通用虚拟世界基座树立了全新标杆。
5/13/2025 11:00:52 AM
AI在线

昆仑万维推出开源Matrix-Game大模型,推动游戏世界的智能生成

近日,昆仑万维正式宣布开源其最新的 Matrix-Game 大模型,这一模型以其超过10亿参数的规模,成为了工业界首个开源的空间智能大模型,标志着交互式世界生成技术的重大突破。 Matrix-Game 不仅支持知名游戏《我的世界》,还专为开放式环境中的高质量生成和精确控制而设计。 Matrix-Game 大模型的核心在于其三大组成部分。
5/13/2025 12:00:52 PM
AI在线

MATRIX:社会模拟推动大模型价值自对齐,比GPT4更「体贴」

随着大语言模型(LLMs)在近年来取得显著进展,它们的能力日益增强,进而引发了一个关键的问题:如何确保他们与人类价值观对齐,从而避免潜在的社会负面影响?模型如 ChatGPT 依赖于基于人类反馈的强化学习(RLHF),这一方法通过鼓励标注者偏好的回答并惩罚不受欢迎的反馈,提出了一种解决方案。然而,RLHF 面临着成本高昂、难以优化等问题,以及在超人类水平模型面前显得力不从心。为了减少乃至消除对人类监督的依赖,Anthropic 推出了 Constitutional AI,旨在要求语言模型在回答时遵循一系列人类规则。
2/27/2024 2:47:00 PM
机器之心
  • 1