发布两天获得了60万View，4000个Like -共计花费7小时，Midjourney生成316条提示，Midjourney放大的128张图像，Runway 中生成的310个ai视频，生成了1个带有文本的视频，预告片中使用了44个视频。
作者无私的写下了自己做这个由AI人工智能工具3d动画短片的制作心得
以下是@Will的全文翻译“GENESIS”的制作过程（Midjourney+Runway）
（温馨提醒：这将是一篇很长的文章。但是，它涵盖了我创建预告片的整个过程！）
以下是所需ai工具官方网站：
- AI绘画：https://www.midjourney.com/
- AI视频生成：https://runwayml.com/
- AI补帧：https://www.topazlabs.com/
Midjourney 教程专题：https://heehel.com/topic/midjourney-topic
RunwayML 教程专题：https://heehel.com/topic/runwayml-topics
您对这个项目的支持非常出色！很多人都要求教程！ 正如所承诺的，这里有一篇详细的文章，详细介绍了我的流程、我如何使用这些工具、工具堆栈的一些详细信息以及如何开始。
在我们进入这个过程之前——反乌托邦主题的想法来自我上周分享的一系列三部电影。 我已经有了很好的即时基础，并决定以此为基础编写一个故事！
【配乐】：从音乐开始是多么重要，我怎么强调都不为过。它极大地影响了观众对视觉效果的感知，并激发了另一种让我们沉浸在内容中的感觉。 因此，这是一个很好的起点，因为它设定了预告片本身的基调。
另一个关键点是编辑工作。我喜欢将视觉效果与音乐进行节拍匹配。在项目期间改变音乐可能会非常耗时。 因此，在开始构建视频序列之前，请尝试获取最终配乐。 从过程上来说，我接下来要做的就是一遍又一遍地听这首歌，在脑海中想象不同的场景。
我真的一边和我的狗散步，一边反复听着这首歌。 这个练习可以帮助我组织我想要在预告片中讲述的想法和故事情节。 一旦我确定了配乐，我就把它拉到视频编辑器中。 我使用 CapCut，因为它对所有人免费。 如果您喜欢其他软件，也可以在 Adobe Premier 或 Final Cut Pro 中执行此操作。
【打造世界和故事】：如果你问我，构建世界和讲故事是作为一名创意人员应该学习的首要技能。 借助允许每个人生成高质量内容的技术，那些知道如何将各个片段拼接在一起的人将会创造奇迹。 对于预告片的故事情节，我想一步步增强紧张感。我为预告片定义了3个阶段：
- 设置场景
- 引入威胁
- CTA 中的高潮
第一步，我开始起草预告片的第一个文案。第一稿已经包括“分享一切，承担后果，然后呼吁人类采取行动”。 定义了整体基调和声音后，我开始围绕这些主题生成场景。 我滚动了大量的环境、军事科技、战斗主题的人类和科幻剪辑，然后我可以从中收集一个故事。
为了增加一些深度，我添加了三个带有发光护身符的孩子的镜头，暗示了故事的更深层次。
【在MJ-midjourney生成一致的图像】让我们深入了解提示！在这种情况下，我已经从之前的帖子中获得了稳定的提示基础。我对其进行了优化，创建了一个模板，我可以在预告片的每个镜头中重复使用该模板。
提示词：___________ star wars warfare, in the style of detailed crowd scenes, earthy naturalism, teal and yellow, frostpunk, interior scenes, cinestill 50d –ar 21:9—style raw
对于每个场景，我都会用我想要的场景来填补空白，确保其他标记最大限度地保持主题、颜色和照明一致的可能性。 同样有帮助的是利用“强变化”功能。这使得创建不同的场景变得容易，同时保留了之前版本的调色板。 然后，女战士的场景可以转变为普通公民、网络黑客或战斗场景，而无需生成新的提示。
【Runway中的动画图像】：令人惊讶的是，这个过程是“最简单的”。至于设置，我总是尝试激活“Upscaled”。但值得注意的是，升级模式经常会遇到面部问题。所以对于人物镜头，我通常使用标准质量。 我根本没有使用文字提示与图像提示相结合的方式。我拖放图像并重新生成它，直到得到我喜欢的结果。
【CapCut （国际版剪映）中的后期编辑】：在《Midjourney》和《Runway》生成输出的同时，我首先放置我知道将发挥重要作用的关键场景。就《创世纪》而言，我知道外景镜头将成为开场。 然后我开始计划文本。当我根据音乐定位文本时，时间轴中没有任何剪辑，这是可能的。
我对2-3个剪辑包进行颜色匹配，使它们看起来像一个更大的电影场景。 CapCut 唯一真正的技巧是考虑对剪辑进行节拍同步。当音乐中有“BWAAA”时，我总是尝试连接剪辑内的动作和/或排列以下剪辑。总的来说，这会让你的整个序列感觉更加身临其境。
【添加运动】我遇到的第一个问题可能是“你的剪辑中是如何加入如此多的动作的？”。 当然，《Runwayml》中存在人工智能随机性的变量，但我使用了两个技巧来增加动作。
1.思考人工智能如何将图像解释。 据我所知，Runway 会拍摄一张照片，然后根据其模型计算哪些部分应该进行动画处理。 我对这个想法进行了逆向工程，并尝试在MJ输出【暗示运动】的图像。这意味着尝试在镜头中加入运动模糊或捕捉移动的头部或人物的静止图像。
2.当您分析《Runwayml》视频时，您会发现，在整个4秒的剪辑中，场景经常发生很大的变化。 这非常方便，因为在预告片场景中，我只使用了完整的4秒剪辑两次。所有其他剪辑的长度均为【0.5–2秒】。我将剪辑的速度提高了1.53倍3倍。
因为，作为观看者，您只能看到剪辑很短的时间，因此您会在场景中感知到更多的运动，因为它本质上是快进该部分。 因此，机器人现在不再转向摄像头4秒，而是在看到您的那一刻突然捕捉到。
【工具堆栈+分析】对于那些感兴趣的人，这里有一些关于工具堆栈、工作量和定价的数字和信息。 预告片带我去：〜7小时 MJ生成316条图像 MJ放大的128张图像 Runway 中生成的310个了1个带有文本的视频预告片中使用了44个视频
这些数字对这些工具的定价有直接影响。 让我解释：创造力需要探索的空间。 这些都是新工具，我们仍处于学习它们如何工作的阶段。没有什么比在探索过程中达到积分上限更糟糕的了。MJ的快速时间很昂贵，而Runway上的积分则更加昂贵。
我建议以无限计划开始这样的项目。最昂贵计划中的Runway积分可以在15分钟内耗尽。 所以对于 Runway，是的，我正在使用95美元/月的计划，这给了我无限的世代。这意味着我可以随心所欲地尝试和实验，而不必担心刷信用卡。
对于Midjourney，您有三种选择来获得无限模式。我使用30美元/分钟，同时还有60美元/分钟和120美元/分钟的计划，有隐身模式和更快的工作时间。我90%的图像都是在放松模式下生成的，并保证您不需要那些更昂贵的计划。
我使用的其他工具是用于音乐的 Pixabay（免费使用）和用于编辑视频的 CapCut（免费使用）。 如果您不愿意，您不必在音乐和编辑上花一分钱！
总而言之，我的“Video Techstack”目前的费用为125美元/分钟，据我所知这是很多钱。 作为创作者，我决定为“无限的创作自由”付出代价。 这几乎涵盖了一切！它仍然是一个非常新的工具；这是我在 Runway 完成的第一个项目。我将继续探索该工具并在推特上分享我的所有见解！
