网站搜索

认识 Stability AI 的 Stable Video 4D,这是对 AI 视频生成的细致入微的诠释


凭借其首个视频到视频的 AI 模型,Stability AI 进一步突破了 AI 视频生成的界限。

人工智能图像生成的流行将我们引向了下一个前沿:视频生成。人工智能领域的几乎所有主要参与者,包括谷歌和 OpenAI,都在开发文本到视频生成器。 Stability AI 刚刚发布了最新的 AI 视频模型,但它的做法与其他模型有点不同。

周三,Stability AI 推出了 Stable Video 4D,这是一种人工智能模型,可以将单个物体视频转换为从不同角度和视角观察该物体的多个新视角视频。这允许用户仅从一个视频生成逼真的多角度视频,如下所示。

使用该模型时,用户首先上传单个视频并描绘他们希望看到渲染的 3D 相机姿势。然后,根据博客文章,Stable Video 4D 在 40 秒内生成跨 8 个视图的 5 个帧,整个 4D 优化需要 20 到 25 分钟。

Stability AI 将 Stable Video 4D 视为能够在不久的将来帮助各行业专业人士的工具。

Stability AI 表示:“我们的团队设想未来在游戏开发、视频编辑和虚拟现实方面的应用。” “这些领域的专业人士可以从多个角度可视化对象的能力中受益匪浅,从而增强其产品的真实感和沉浸感。”

尽管 Stability AI 已经发布了其他 AI 视频生成器,例如将图像转换为视频的 Stable Video Diffusion 和从单个图像生成 3D 对象的 Stable Video 3D,但这是该公司的第一个视频到视频生成器,公司称其为“令人兴奋的里程碑”。

除了人工智能模型之外,该公司还发布了一份技术报告,展示了该模型的开发情况,包括方法、挑战等。

Hugging Face 目前提供稳定的 4D 视频。 Stability AI 表示正在积极致力于改进模型。

相关文章