视频生成的SD时代:Stable Video Diffusion开源公测了!

当大家都沉浸在 Sora 的惊艳中时,2024-2-21这一天,Stable Video Diffusion1.1官网正式开放了公测!快去玩!Stable Video Diffusion确实已经正式开放公测。根据证据,Stability AI在2024年2月22日正式上线了他们的AI视频产品。这表明Stable Video Diffusion已经不再是研究预览阶段,而是正式向公众开放使用。此外,证据中还提到了Stable Video Diffusion的开源信息,指出其开源模型包括两个图生视频的模型,一个生成14帧,一个生成25帧,这些模型基于Stable Diffusion V2.1进行训练。因此,可以确认Stable Video Diffusion是一个经过开源公测阶段的AI视频生成工具。

先看卡兹克的教程介绍:
https://mp.weixin.qq.com/s/YGEnIzfYA3xGpT9_qh56RA


案例视频的GIF转化图片:





Stability AI 推出了 Stable Video Diffusion,这是 Stability AI 的第一个基于图像模型 Stable Diffusion 的生成式视频基础模型。Stable Video Diffusion是由Stability AI开发的一个AI视频生成工具,它允许用户基于一张图片生成数秒钟的视频。这个工具在2023年11月22日被发布,并提供了开源模型,包括两个版本:一个生成14帧的视频,一个生成25帧的视频。这一技术的推出标志着视频生成技术进入了一个新的时代,即“SD时代”

Stable Video Diffusion的使用相对简单,用户只需上传图片并设置一些高级参数(如每秒的视频帧数)即可开始生成视频。此外,该工具对显卡的要求较高,因此如果用户的电脑没有足够的显存,建议尝试云环境使用,如AutoDL、青椒云等。ComfyUI官方已经支持Stable Video Diffusion,更新至最新版后,放入模型即可使用。

Stable Video Diffusion的工作原理基于深度学习技术,能够将一张图片转换为视频。该模型通过潜在扩散模型从静止的图像中生成短视频片段,经过训练,可以从576x1024分辨率的上下文帧生成14帧、相同分辨率的视频。这种模型的应用前景广泛,不仅可以在创意内容生成、教育、广告等多个领域发挥作用,还能通过实践项目和案例研究,帮助学生提升绘图技能,并学会有效传达数据和信息。

总的来说,Stable Video Diffusion是一种革命性的技术,它能够从单张图片生成视频,为视频生成带来了新的思路和可能性。随着技术的不断发展和完善,Stable Video Diffusion有望在创意视频内容生成领域发挥更大的作用。

原文链接:,转发请注明来源!