用 Runwayml 的“文字转视频”模型制作AI视频《夏威夷奥德赛》

图片：Midjourney
视频：RunwayML

Midjourney是一款AI制图工具，只要关键字，就能透过AI算法生成相对应的图片，只需要不到一分钟。可以选择不同画家的艺术风格，例如安迪华荷、达芬奇、达利和毕加索等，还能识别特定镜头或摄影术语。有别于谷歌的 Imagen和OpenAI的DALL．E，Midjourney是第一个快速生成AI制图并开放予大众申请使用的平台。Midjourney的主要原理是通过收集大量已有的作品数据，对这些数据进行算法解析，它就可以通过关键词生成各种类型的图像，如卡通、风景、人物等。同时，用户还可以通过图片指令对生成的图像进行调整和优化。

Midjourney官方网址页面链接：https://www.midjourney.com/home
RunwayML官方网址链接：https://runwayml.com/
更多作品：https://heehel.com/category/ai-works
教程专区：https://heehel.com/category/ai-tutorial

RunwayML是一个由艺术家创立的云端平台，致力于将AI创意带给故事讲述者。无需下载，支持多格式导入导出，适用于专业和个人创作者。其核心AI模型Runway Gen-2结合机器学习、深度学习和计算机视觉，帮助实现创意愿景。Motion Brush功能可轻松生成动态图像，简而言之，RunwayML提供创新技术和工具，拓展AI创意应用。

Runway Gen-2是RunwayML一个集成了丰富的AI创作工具的功能，它支持图像、音频和视频的深度学习生成与处理，支持可视化编程开发互动艺术，提供了社区学习与分享资源，同时也可以导出项目并与其他创作软件整合。这款软件为艺术家和设计师提供了一个强大的数字创作环境，可以利用深度学习技术快速生成各种原始艺术素材，还可以开发出交互式数字艺术作品，大大提高了他们的创新效率和作品质量。

下面是简单分步过程：

1. 使用 ChatGPT plus 来绘制一些视觉效果
2. 将 LLM 生成的每个视觉效果转换为提示，以便在 Midjourney AND Runway 的 Text 2视频模型中使用。
3. 在Runwayml加入提示词
4. 将 MJ 图像上传到 Runways Gen 2模型中，然后开始直接提示进入 Gen 2
5. 加入音频
6. 剪辑

https://heehel.com/aigc/midjourney-runwayml-elevenlabs.html

https://heehel.com/aigc/midjourney-v6-clothing-brand.html