//再不认真就输了!
//致力于发现AIGC动态与教程。

同学问我为什么跪着看,SVD生成,AI电影预告《CLARK》

该AI作品使用Stable Video Diffusion制作
其中最令人惊讶的是穿墙时的“长”镜头,作者在 comfyUI中创建了一个超大全景图并在 Photoshop 中合成。使用深度图将其变成一个粗糙的 3D 环境,并使用 mixamo 数据让一个没有阴影的简单角色穿过它。所有层通过 inpaint 和 IP适配器一起导回 comfyUI

作者:ButchersBrain
编译:喜好儿网

Stable Video Diffusion是一种文本驱动的视频编辑框架。通过使用自然视频的大量实验,与其他基于扩散的方法相比,StableVideo在保持几何形状和时间连续性的情况下产生优越的编辑结果。
Stable Video Diffusion支持文本生成视频和图像生成视频以及物体从单一视角到多视角的3D合成。目前开源的Stable Video Diffusion模型是两个图生视频的版本,都是基于Stable Diffusion V2.1进行训练的,一个生成14帧(SVD),一个生成25帧(SVD-XT)。从人工评测结果看,效果超过runaway的GEN2和Pika Labs的免费模型。

ComfyUI是一个基于节点的GUI,用于Stable Diffusion。它通过将不同的节点(称为节点)链接在一起来构建图像生成工作流。一些常用的模块包括加载checkpoint模型、输入提示词、指定采样器等。ComfyUI将工作流程分解为可重新排列的元素,因此可以轻松地创建和修改图像生成工作流。
ComfyUI的使用方式与传统的WebUI有所不同,它采用模块+点+连线的方式来操控,有一定的上手难度。然而,对于想要更专业地使用AI绘画,甚至想要将AI绘画工作流进行分工合作的用户来说,ComfyUI是一个非常值得尝试的工具。

Adobe Photoshop,简称“PS”,是由Adobe Systems开发和发行的图像处理软件。Photoshop主要处理以像素所构成的数字图像,利用其众多的编修与绘图工具,可以有效地进行图片编辑和创造工作。PS有很多功能,在图像、图形、文字、视频、出版等各方面都有涉及。

Mixamo是一个提供动画资源的在线平台,致力于数字角色动画。其核心技术是从动作捕捉到自动骨骼绑定,可以帮助动画师、游戏开发者和电影制片人快速创建高质量的角色动画。此外,Mixamo还提供了丰富、免费的动作捕捉数据供下载。

Stable Video Diffusion官方网站:
https://stability.ai/

ComfyUI专区:
https://heehel.com/topic/comfy-ui

mixamo官方网站:
https://www.mixamo.com/

https://heehel.com/aigc/comfyui-tutorial.html

https://heehel.com/aigc/comfyui-ldsr.html

版权声明:本文采用知识共享 署名4.0国际许可协议 [BY-NC-SA] 进行授权
文章名称:《同学问我为什么跪着看,SVD生成,AI电影预告《CLARK》》
文章链接:https://heehel.com/aigc/clark.html
本站资源仅供个人学习交流,未经许可不得用于商业用途,自行承担法律责任。
如有疑问,请联系微信:heehelcom

喜好儿——再不认真就输了!

致力于发现ai人工智能应用的新世界, 长期更新目前热门AI教程与动态!期待在这个工业变革时代中,希望你我都能发出一点光。

登录

找回密码

注册