三易生活 02-14
昆仑万维发布全新世界模型,加速探索空间智能
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_keji1.html

 

日前,昆仑万维方面正式发布新一代世界模型 Matrix-Zero。据了解,Matrix-Zero 包含 3D 场景生成大模型、可交互视频生成大模型两款子模型,这也意味着昆仑万维成为国内首家同时推出 3D 场景生成、可交互视频生成模型的探索空间智能的企业。

据悉,昆仑万维 3D 场景生成大模型支持将用户输入的图片转化为真实合理的 3D 场景,并具有全局一致性、可自由探索、支持不同风格图片输入、支持风格迁移、支持动态场景生成等优势。

以可自由探索为例,昆仑万维 3D 场景生成大模型支持在场景中进行任意方向的长距离、大范围的探索,为电影 / 短剧场景镜头生成提供了更多的可能性。而且从行进方向来看,该模型能实现先环视再前进、后退、前进后右转、360 度俯视、180 度回头、持续左转、环视场景、大范围前进等更大、更自由的角度探索。

在动态场景生成方面,得益于场景布局生成模块和纹理生成模块两个核心模块,昆仑万维 3D 场景生成大模型可生成拟人逼真的场景。据了解当用户在场景中运动时,昆仑自研 3D 场景生成大模型会不断对场景缺失区域进行几何和纹理的补全,从而确保用户在任何位置、任何角度都能看到合理、一致的场景。

而昆仑万维自研可交互视频生成大模型则建立在先进的生成式视频模型之上,结合自主研发的用户交互模块,实现了一种以用户输入为核心驱动的可交互空间智能视频生成方案。

据了解,该方案能够在保证开放领域视频生成能力的同时,进一步增强对视频内容中视角移动的精确控制,使其更加符合用户的交互需求和预期。对此昆仑万维方面表示," 通过这种方式,我们不仅可以生成符合用户意图的视频内容,还能够优化空间智能模型的适配性,从而拓展在虚拟环境、交互式应用以及沉浸式体验中的应用场景 "。

【本文图片来自网络】

宙世代

宙世代

ZAKER旗下Web3.0元宇宙平台

一起剪

一起剪

ZAKER旗下免费视频剪辑工具

相关标签

昆仑万维 自主研发 360
相关文章
评论
没有更多评论了
取消

登录后才可以发布评论哦

打开小程序可以发布评论哦

12 我来说两句…
打开 ZAKER 参与讨论