万人试用AI新应用:真人视频转动漫、像素风,从未如此丝滑

转载
370 天前
3300
机器之心

文章转载来源:机器之心

视频的次元壁就这么被打破了。

原文来源:机器之心

图片来源:由无界 AI生成

在 AI 的加持下,一张照片可以千变万化,其实视频也能。


这是新 AI 应用 DomoAI 公布的一些 demo:只需要给 AI 一些原始视频,它就可以帮你把视频改成你想要的风格,比如动漫风、像素风或者 3D 卡通风格。


这一应用在 X 平台上引起了很多人的关注。因此,除了官方 demo,我们还能看到很多网友晒出的作品。


图源:https://twitter.com/iamfakhrealam/status/1736037814062686581

上面这个用《瞬息全宇宙》电影片段进行尝试的网友表示,DomoAI 的生成结果「超级干净、稳定且令人印象深刻!」

其他网友用更多视频素材进行了尝试,结果同样非常惊艳。


图源:https://twitter.com/ProperPrompter/status/1736773964763193473


图源:https://twitter.com/aikoujp/status/1736214836609233266

从现有 demo 来看,这种视频转视频的新方法有很多应用场景,比如电影和动画制作、广告营销、艺术设计以及娱乐和社交媒体等。


图源:https://twitter.com/taziku_co/status/1736155112710750454

目前,DomoAI 可以在 Discord Today 上免费使用,有四种风格可供选择,分别是 Anime(动漫风)、Pixel(像素风)、TV Anime(日式动画风)和 3D Cartoon(3D 卡通风)。有网友表示,目前看起来动漫风格效果最好。


图源:https://twitter.com/decohack/status/1735948984861212887

DomoAI 于今年 10 月初发布,最初作为一个免费的图像生成工具,它决定在动漫赛道上冲出重围。用户既可以将现实图片转换为动漫风格,亦可以将动漫风格,转变为现实风格图像。


经过不断更新后,用户只需要上传一张图片,就能够生成结果。如果你想要更好的效果,还可以输入文本进行相应的描述,让生成更加精准。




12 月 12 日,DomoAI 带来了重磅更新,它有了视频转视频的新功能。「加强版」DomoAI 可以轻松实现场景之间的过渡,并通过增强视觉效果和提高清晰度来提升视频质量。多种模式和自由创作的环境也能够让你的作品展现出更多创意。该功能发出后,网友们纷纷参与测试版,提供改进建议。




最近更新中,DomoAI 团队已将生成精度进一步提升,并改善了人物生成时面部闪烁的问题。





DomoAI 的生成效果十分优秀,吸引了大批网友的关注和喜爱。在视频到视频功能发布后,社区用户噌噌猛涨,从 10000 用户到 20000 用户只用了短短 4 天时间。



怎么用 DomoAI 将视频转化为其他风格呢?

其实实操起来非常方便。首先在 Discord 中输入你的指令 ——/video,然后将你的视频上传,并根据你的需要输入 prompt,这可以让生成结果更加符合你的期待。




接下来,你需要根据 DomoAI 机器人的提示,选择生成视频的设置。你可以调整生成视频风格、时长以及跟视频或 prompt 其中一个更符合。最后,点击开始生成,你就可以坐等「奇迹」发生了。



在 DomoAI 发布视频转视频应用之前,其实也有人尝试用一些低成本的方法把真人视频转成动漫等风格,比如 X 平台(原推特)网友 @CoffeeVectors 用 ComfyUI 和 LCM LoRA 重制的 BLACKPINK 代表作《DDU-DU DDU-DU》MV。不过,由于逐帧渲染工作量比较大,作者在这版作品中没有进行细致的微调,因此效果比较一般。DomoAI 的生成效果明显要好很多。




在文生图、文生视频已经挤满了玩家之后,视频生成视频会不会成为生成式 AI 的下一个热门赛道?让我们拭目以待。

参考链接:
https://twitter.com/decohack/status/1735948984861212887
https://twitter.com/ProperPrompter/status/1736773964763193473
 https://twitter.com/taziku_co/status/1736155112710750454
https://twitter.com/DomoaiO9855