视频生成模型SVD刚才发布了1.1版本,比上个版本的进步非常多,之前的几个比较大的问题都有了改善。另外,SVD 一个类似Runway TV的视频网站也有他们新模型的推荐内容演示,不过现在还没有完全开放注册,需要到官方那里加入候补名单。
模型下载链接:https://heehel.com/svd-version-1-1
AIGC专区:https://heehel.com/category/aigc
官方网址注册候补链接:https://stability.ai/contact
Stable Video Diffusion(SVD),这是该公司首个基于图像模型的生成式AI视频基础模型。该模型作为Stable Diffusion研究预览的一部分,其代码、权重和研究论文已经正式发布。Stable Video Diffusion代表了Stability AI在视频生成领域的最新探索,该技术的引入将为视频内容的高质量生成带来崭新的可能性。
该模型借鉴了公司先前成功的Stable Diffusion图像生成系统的基础,为用户提供了更加出色的视频生成体验。另外Stability AI也宣布,作为公司发展的一部分,他们将很快推出一款具有文本到视频界面的全新网络体验。
下面是网友使用后总结的一些变化:
- XT模型本体的优化使其对显存的要求降低,这使得原本无法运行的电脑现在可以尝试运行。同时,推理速度的大幅提升意味着模型可以更快地处理任务。
- 模型的整体运动幅度显著增加,这表明模型对于内容的理解更为深入。以前,很多内容只是通过运镜来展示,但现在模型真正理解了内容的含义。
- 在生物和人像的运动方面,模型的表现也有了很大的提升。人物不再是静止的图片,而是能够进行相应的运动并与其他环境元素进行交互。
- 之前的视频中的密集噪点问题得到了一定程度的优化,这使得视频的质量得到了提升。
- 尽管2D动漫图像现在可以动起来了,但效果仍然不够理想。这可能是因为模型在处理这种类型的内容时还存在一些困难。
- 值得一提的是,模型在流体运动效果方面的表现依然非常出色,这表明模型在这方面的技术已经相当成熟,没有出现负向优化的情况。
https://heehel.com/aigc/stable-video-diffusion-svd.html
https://heehel.com/aigc/comfyui-svd-workflow.html