开放生成式人工智能初创公司Stability AI在3月发布了Stable Video 3D,是一款可以根据图像中的物体生成出可旋转的3D模型视频工具。Stability AI在7月24日发布了新一代的Stable Video 4D,增添了赋予3D模移动作的功能。

We are pleased to announce the availability of Stable Video 4D, our very first video-to-video generation model that allows users to upload a single video and receive dynamic novel-view videos of eight new angles, delivering a new level of versatility and creativity.

In…pic.twitter.com/1YbI2W514K

— Stability AI (@StabilityAI)July 24, 2024

Stability AI解释SV4D中的4个维度是指宽度(x)、长度(y)、高度(z)和时间(t)。SV4D可以将一个3D模型的视频转换成可以在8个不同角度的多视角视频,能够从不同视角以及不同时点来查看这个可移动的3D模型。目前SV4D能够在大约40秒内生成跨越8个视角的5帧视频,整个优化过程只需20-25分钟。

图片来源:Stability AI

Stability AI表示该模型仍处于研究阶段,并认为SV4D将会为电影制作、增强现实、虚拟现实、电玩游戏和其他需要对象有动态视角的行业带来重大的创新。目前Stable Video 4D已经在Hugging Face上开放给开发者和研究人员查看和使用。

数据及图片来源:Stability AI