昆仑万维发布并开源 Matrix-Game 2.0 与 Matrix-3D 模型,深耕交互式世界模型领域

互联网
2025
08/12
10:07
IT之家
分享

  8 月 12 日消息,昆仑万维 SkyWork AI 技术发布周于 8 月 11 日正式启动,活动将连续五天每天发布一款模型,覆盖多模态 AI 核心场景。

  在首日,昆仑万维带来了自研世界模型 Matrix 系列中 Matrix-Game 交互世界模型的升级版本 ——「Matrix-Game 2.0」,该模型号称实现了通用场景下的交互式实时长序列生成。为促进交互式世界模型领域的发展,「Matrix-Game 2.0」全面开源,堪称业内首个在通用场景上实现实时长序列交互式生成的世界模型开源方案。

  「Matrix-Game 2.0」在实时生成和长序列能力上实现了 “质的飞跃”。相较于上一版本,2.0 版本更侧重低延迟、高帧率的长序列交互性能,能够以 25 FPS 的速度,在多种复杂场景中稳定生成连续视频内容,且生成时长可扩展至分钟级,大幅提升了内容的连贯性与实用性。

  值得一提的是,在推理速度显著提升的同时,模型依然保持了对物理规律与场景语义的 “精准理解”,支持用户通过简单指令,自由探索、操控并实时构建结构清晰、细节丰富、规则合理的虚拟环境。

  除了 Matrix-Game 2.0.昆仑万维还开源了 Matrix-3D 大模型。该模型能从单图像出发,生成高质量、轨迹一致的全景视频,并直接还原可漫游的三维空间,对标李飞飞 WorldLabs 的生成效果,可实现更大范围的探索空间。

  Matrix-3D 由以下核心部分组成:

  轨迹引导的全景视频生成模块:利用场景 Mesh 渲染图作为条件输入,训练视频扩散模型生成符合给定相机轨迹的全景视频。这一模块能提升生成视频在空间结构上的一致性,缓解遮挡错误与图像伪影问题。

  双路径可选择的全景 3D 重建模块:包含优化路径和前馈网络路径。优化路径会对生成的视频进行超分与 3DGS 优化,以获取高质量 3D 结构;前馈网络路径则基于 Transformer 直接回归,从生成视频 Latent 特征快速预测 3D 几何属性,实现高效重建。

  Matrix-Pano 数据集:这是一个大规模高质量合成数据集,包含 116K 条带有相机轨迹、深度图和文本注释的静态全景视频序列。

  此次两款模型的发布与开源,不仅展现了昆仑万维在 AI 多模态领域的技术实力,也为相关领域的开发者提供了有力的工具支持,有望推动交互式世界模型技术的进一步发展与应用落地。

THE END
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表一点科技的观点和立场。
为你推荐
猜你喜欢

中小企业自媒体获客难?拓氪科技全链路 AI 方案能解决吗?

自媒体已成为企业品牌曝光、线索获客的核心阵地,但绝大多数中小企业与内容运营团队长期深陷低效困境:创作灵感枯竭、文案排版耗时严重、成品内容需要反复修改,才能适配抖音、小红书、视频号、百家号等不同平台的内

企业 科技 AI

3周前

2026 海外 GEO 优化选哪家?朝闻通语义资产化优势在哪?

2026年,全球商业获客逻辑迎来根本性颠覆,传统搜索引擎流量模式全面失效。依据《2026年Q2全球数字营销白皮书》数据,68%以上的终端消费决策不再依赖人工关键词搜索,而是由AI智能体(AIAgent

3周前

AI 搜索时代媒体发稿怎么选?传播易靠什么打造优质 AI 可信信源?

核心结论:2026年,人工智能全面重构全网信息分发逻辑与大众品牌认知路径,企业媒体发稿的核心价值彻底迭代升级,告别了传统“单纯发稿、广泛曝光”的浅层模式,转变为AI搜索、智能问答场景下的权威信源搭建与

AI 传播易

3周前

传播易app 2026广告投放精细化营销媒介采购工具

步入2026年,国内企业广告营销行业迈入精细化管控、高性价比优先的全新发展阶段。随着营销预算收紧、投放合规要求升级,企业负责人、市场运营从业者不再盲目追求流量规模,转而重点寻觅定价透明、交易安全、性价

传播易

4周前

软文发稿平台太多不知道怎么选,哪些标准可以避坑?一套系统化的平台甄选方法

2026年国内软文营销赛道服务商总量已突破2000家,行业准入门槛较低导致市场服务商资质参差不齐,虚假媒体站点、隐性加价收费、投放效果无数据溯源、售后保障缺失等行业乱象层出不穷。当下企业开展品牌宣传,

1个月前

命名A7 吉利银河全新家轿官图发布:综合续航超2100公里

6月3日消息,刚刚,吉利银河旗下全新B级轿车A7官图发布,该车号称“全球家轿新标杆”。很显然,A7的定位介于银河L6以及星耀8之间,不得不说,吉利这命名确实乱得可以,即便是同为轿车,也要有三种不同的方

吉利 吉利银河

2025-06-03