谷歌刚刚发布了强大的AI视频生成模型,lumiere,它几乎包揽了目前所有AI视频生成工具的功能,什么文生视频,图转视频,画面修复等一大堆厉害的算法。代码还没公布,喜好儿网会持续追踪,感兴趣的朋友记得关注我们啊。
Lumiere是一个视频生成扩散模型,其名字来源于法语,“启蒙者”的意思。
包含了常见的文生视频,图转视频,风格化的功能,这些pika,runway都有,但Lumiere厉害之处不止如此,它的风格化参考功能有些东西,单靠一张参考图,就能配合提示词生成统一风格的新图像,
还有视频修复功能,这是真正意义上的修复,能够把视频画面中残缺部位进行算法修复,恐怕以后不存在马赛克这个名词了。此处应该有掌声!
Lumiere用于生成逼真、多样化和连贯的动态视频。它的出现对于视频合成领域具有非常重要意义,并能够应用于各种内容创作任务和视频编辑应用程序。许多网友都抱怨市面上AI视频工具生成的视频太短了,希望谷歌能借助这次机会开个好头,推出生成一致性长视频的话就无敌了。
lumiere项目展示地址:
https://lumiere-video.github.io/
lumiere论文链接:
https://arxiv.org/abs/2401.12945
更多工具:
https://heehel.com/category/ai-soft
https://heehel.com/aigc/google-lumiere-video-model.html