昆仑万维发布Matrix-Zero世界模型,开启空间智能新时代

2月14日,昆仑万维正式推出 Matrix-Zero世界模型,成为中国第一家同时推出3D场景生成和可交互视频生成模型的探索空间智能的企业。

昆仑万维发布Matrix-Zero世界模型,开启空间智能新时代

Matrix-Zero世界模型包含两款子模型:

(1)昆仑万维自研3D场景生成大模型,支持将用户输入的图片转化为可自由探索的真实合理的3D场景,比World Labs生成场景的探索范围更大更自由,而且包括动态物理效果;

(2)昆仑万维自研可交互视频生成大模型,提供以用户输入为核心驱动的可交互空间智能视频生成方案,支持根据用户实时输入生成互动视频效果,具备更精准控制的action model。

昆仑万维发布Matrix-Zero世界模型,开启空间智能新时代

昆仑万维Matrix-Zero的3D场景生成功能,支持将用户输入的图片转化为可自由探索的真实合理的3D场景,具备全局一致性、可自由探索、支持不同风格图片输入、支持风格迁移、支持动态场景生成等亮点。

能够实现这样的逼真效果,得益于昆仑万维自研3D场景生成大模型,包含两个核心模块:场景布局生成模块和纹理生成模块。几何生成模块借助可微渲染和扩散模型技术,能创造出和输入图片一致的3D场景布局;纹理生成模块在图片生成模型和视频生成模型基础上训练,当用户在场景中运动时,昆仑自研3D场景生成大模型不断对场景缺失区域进行几何和纹理的补全,从而确保用户在任何位置、任何角度都能看到合理、一致的场景。

此前,谷歌Genie(可交互生成环境)系列已经向大众展示了世界模型的能力和魅力。为达到更好的流畅性、一致性等,昆仑万维可交互视频大模型建立在先进的生成式视频模型之上,结合自主研发的用户交互模块,最终实现了一种以用户输入为核心驱动的空间智能视频生成方案

该方法能够在保证开放领域视频生成能力的同时,进一步增强对视频内容中视角移动的精确控制,使其更加符合用户的交互需求和预期。通过这种方式,我们不仅可以生成符合用户意图的视频内容,还能够优化空间智能模型的适配性,从而拓展在虚拟环境、交互式应用以及沉浸式体验中的应用场景。

作为针对图片对应的 3D 世界中自由探索提出的视频生成系统,Matrix-Zero 能够在不同环境下高效地生成高质量的视频内容,并确保视频的流畅性、一致性和合理性。

紧握AI时代脉搏,成为中国探索空间智能的领跑者。昆仑万维作为中国AI领军企业,始终践行公司使命——实现通用人工智能,让每个人更好地塑造和表达自我,坚持在人工智能领域自主研发,持续推出AI产品。

过去三年,昆仑万维在视觉多模态、深度学习、强化学习等关键技术方向取得了一系列成绩,同时构建起了完整的AI矩阵:最懂金融、学术的天工AI搜索,全球首个AI音乐创作平台Mureka,AI 短剧平台SkyReels,AI社交产品Linky,AI游戏等,形成了“AI前沿基础研究——基座模型——AI矩阵产品/应用”的产业链。

2025年1月,「天工大模型4.0」o1版和4o版正式上线天工APP和网页。2025年2月8日,昆仑万维旗下「天工AI」正式推出PC版重大更新——上线“DeepSeek R1 + 联网搜索”功能。

勇立潮头,敢为人先。今天,昆仑万维Matrix-Zero系列模型的开发和迭代也代表了公司对未来AI技术的提前布局,进一步赋能公司AI业务矩阵。交互生成模型的落地将变革可交互内容引擎,大大提升公司AI多矩阵产品的生产力。

Matrix-Zero世界模型预计4月份上线,将对公司AI游戏生产、AI短剧生产和编辑等业务进一步赋能,为用户和开发者带来新的平台和工具。当视频模型发展到可以逼真模拟物理世界时,游戏可能不再需要传统的3D引擎,许多实验和模拟将可以在虚拟环境中进行,而影视创作也将变得更加普及,甚至成为每个人的基本技能。虽然这些看似是未来的场景,但技术正一步步将它们变为现实,视频生成模型的火热正是这一趋势的重要体现。

未来大模型发展将更加关注智能体工具和用户交互。空间智能技术不仅为未来智能体研发提供了虚拟平台,也带给用户全新的与生成世界交互的体验,大大提升了交互的多样性。空间智能技术的发展也将是通往具身智能乃至AGI路上的一个重要技术里程碑。我们仍将持续升级迭代,研发更先进的AI平台、打磨体验更好的AI产品,进一步推动人工智能的繁荣发展。

【来源:经济界】凡本网注明“来源:经济界” 的所有作品,版权均属于经济界。如转载,须注明“来源:经济界”。违反上述声明者,本网将追究其相关法律责任。
Previous 2025-02-13 下午5:49
Next 2025-02-14 上午11:19

相关推荐

  • “聚势江城 智领整装”中国泛家居创新论坛在武汉召开

    6月13日下午,主题为“聚势江城,智领整装”的中国泛家居创新论坛在武汉隆重举行。论坛汇聚了来自行业协会、高等院校、研究机构及知名企业的核心力量。中国木材保护工业协会会长刘能文、中国林产工业协会会长周鸿升、国际木材科学院院士/中国林学会家具与集成家居分会理事长/南京林业大学教授吴智慧、中国林科院木材工业研究所信息中心主任唐召群、北京林业大学材料学院家具设计与工…

    5小时前
    0
  • WD-40雨季公益行动专业赋能江苏防汛救援,筑牢安全防线

    6月10日清晨,WD-40中国公司的流动服务车队载着防锈防潮物资缓缓驶入南京蓝天救援队基地的设备中心,WD-40中国公司捐赠的防汛防锈物资将在此地作现场捐赠。随着捐赠仪式的正式开始,一场以 “专业赋能防汛”为主题的雨季公益行动正式拉开帷幕——除捐赠仪式外,WD-40中国公司雨季公益行动同步启动南京市场路演培训活动,以专业技术赋能防汛救灾。 捐赠仪式上,WD-…

    11小时前
    0
  • 楼宇科技TRUE大会强势回归!共探“数智碳索”下的行业跃迁之路

    随着“双碳”目标进入攻坚期,中国建筑行业加速向“存量更新时代”转型,楼宇数智化与低碳化融合成为破局关键。在此背景下,第四届楼宇科技TRUE大会将于2025年7月2-3日在上海再次乘势启航。本届大会以“数智碳索·TRUE见跃迁”为主题,将携手全球产业领袖、ESG权威专家、产业链生态伙伴以及媒体,共同探索建筑领域数字化与碳中和的创新融合路径,推动行业高质量跃迁。…

    4天前
    0
  • 618 囤菌小宝千亿活菌守护肠道,开启健康生活新体验

    在快节奏的现代生活中,肠道健康成为越来越多人关注的焦点。益生菌作为维护肠道微生态平衡的关键,其重要性不言而喻。而在众多益生菌品牌中,菌小宝凭借其卓越的品质和强大的功效,成为了消费者的首选。今年 618,囤上几瓶菌小宝,给肠道来一场全方位的呵护。 菌小宝作为中国专业益生菌品牌,也是中国益生菌行业团体标准起草单位之一,20 余年专注益生菌领域,率先攻克千亿活菌技…

    5天前
    0
  • 七部门新政领航,用友YonSuite为食品工业数智化转型注入强劲动能

    6月10日,工业和信息化部等七部门联合印发《食品工业数字化转型实施方案》(以下简称《方案》),部署了“四大行动”和“十八项具体措施”,旨在加快推动数字技术全面赋能食品工业发展,吹响了中国食品工业迈向数智化新时代的号角。 这一国家层面的政策方案,不仅为行业发展指明了方向,也为像用友这样的数智化解决方案服务商提供了广阔的舞台,共同擘画食品工业高质量发展的宏伟蓝图…

    6天前
    0