“矩阵”(The Matrix)AI模拟器!无限生成720p视频

在电影《黑客帝国》所描绘的未来世界中,人工智能创造了一个完全沉浸式、真假难辨的交互世界。

如今,在AI技术加持下,这一场景正逐步成为现实!

今天给大家介绍一个有趣的项目:矩阵”(The Matrix)

矩阵是什么?

“The Matrix”是以AI为基础的世界模拟器正式,能够无限生成高保真的720p真实场景视频,用户可实时控制视频场景,体验每秒16帧的动态画面。

图片

“矩阵” 项目在世界模拟领域取得了重大突破,实现了电影中所展现的用户交互的帧级精度,其响应速度与电影中描绘的一样迅速,提供了与现实几乎无法区分的 AAA 级视觉效果。

图片

在 “矩阵世界” 中,用户可以通过第一人称和第三人称视角进行实时、灵敏的控制,无缝探索动态环境。

该项目基于《极限竞速:地平线 5》和《赛博朋克 2077》等 AAA 级游戏数据以及现实世界镜头进行训练,使用户能够在连续的视频中穿越沙漠、城市、森林等多样地形。

图片

“矩阵” 项目引入的 Swin - DPM 技术,显著扩展了注意力计算的感受野,在保持计算成本不变的情况下,能够生成高质量、超长时间且视觉一致的视频

项目地址(还未开源):