让你的文生图“动起来”,如何用Runway的运动画笔玩出新花样

转载
396 天前
7823
Kyle

文章转载来源:Kyle

无界 AI + Runway运动笔刷生成

Stable Diffusion、Midjourney、DALL-E ......这些文生图大模型改变了我们曾经依赖的图像生成模式,只需几个词语就能生成精美的图像。但生成式 AI 技术的升级迭代已经不再局限于生成“僵硬”的图片,现在这些图片已经可以动起来了。

近日,Runway 正式推出了“运动画笔”(Motion Brush)功能,让你的图片变成视频 ,迅速动起来。这个新 运动画笔功能有望成为创作者可以用来为 AI 制作的图像和视频添加运动元素的另一个强大工具。 不仅仅是任何运动,而是可以添加到特定区域的非常精确和受控的运动。

运动画笔工具的工作原理是允许用户在其视频生成中添加受控运动。它的工作原理是允许用户“绘制”一个区域或主题,然后选择一个方向并添加强度,然后 Runway 将为该区域添加运动并达到该强度。

Runway的运动画笔允许您为您的生成添加受控运动,从而更好地控制生成的内容,使得模型可控性大幅提高。

Runway 运动笔刷可以转换任何图片为视频,包括在 Midjourney 等模型上生成的图片。此外,Runway 最近也推出了名为 Runway Gen-2 的生成式 AI 模型的新版本,这是一个多模态 AI 系统,能够生成图像、视频和带文本的视频。 用户现在可以使用Gen-2通过简单的文本提示创建新视频。 对于免费帐户,Runway Gen-2 可以生成四秒的视频,可以在任何平台上下载和共享,不过视频会包含水印。

让我们看一下 Runway 的运动画笔,探索如何将其用于 AI 图像和视频。

1. 使用 Midjourney 中生成静态 AI 图像,然后使用 Runway 的运动笔刷将其转换为视频

2. 社交网络上最火热的 Meme 图之一也能动起来

3. 使用 Runway 制作的音乐视频

4.生成表情包动图