AI的进化日新月异,很多之前只是在想象中的操作,已经有很多可以使用AI来完成了。最新的Stable Diffusion,ControlNet,EBsynth有哪些神奇的应用,如何一键替换视频中人物和场景,如何根据文字描述即可生成梦幻视频?我们整理了一些当前最新最强的工具收录到
AI操作视频的工具最新最强集合https://www.webhub123.com/#/home/detail?p=2VCNG-Rmw1
收录效果如下
点击右上角加号即可一键保存全部网址到我的收藏,可以完全自由免费地管理和分享您在网上的所有想要收藏的网址。
由于平台限制,无法在详细介绍时给每个工具添加访问链接,已经全部放在前面的收录里面了。
Wonder Studio
替换视频中的人物为任意模型,尤其适用于电影特效。可以使用官方提供的模型,也支持自己制作的模型。操作简单,效果好,动作幅度不大的情况下效果完美。
Runway GEN2
能实现的视频效果很不稳定,但它是通过文字生成视频,完全是从无到有,可以说是最前沿的AI视频技术。目前有多种模式
(1) 直接文字生成视频
(2) 提供一张照片,然后加文字描述,如下图这种,也能生成不错的视频效果
(3) 照片生成视频
(4) 照片风格化,这个技术很成熟,只不过现在能生成一些比较梦幻的效果。
(5)故事板。给定一个模板,让AI替你想象
(7) 纯渲染: 将模型渲染成真实视频。
Stable Diffusion+ControlNet+EBsynth
上限很高但操作极其复杂的AI视频方式。目前还没有手把手的中文教程。通过视频生成视频,本质是逐帧替换。
PHC
AI生成动作作为输入,目前这是一篇论文,尚未公布源码。
Blender+Stable Diffusion 生成人物动作视频
Video to video with Stable Diffusion (step-by-step) - Stable Diffusion Art 一套非常齐全的Stable Diffusion生成视频的教程,并展示了不同流程生成的视频效果。包括:
- ControlNet-M2M script
- ControlNet img2img
- Mov2mov extension
- EbSynth
- Deforum
- Stable WarpFusion
Stable Diffusion+Deforum
通过Deforum控制镜头,SD生成图片,实现不断演化的视频,效果很酷。
Luma AI
通过手机录制场景视频,结合NeRF技术生成3D场景视频,支持任意角度查看和缩放
Github f2-nerf
样使用NeRF技术,生成无限场景视频
D-ID
上传图片+音频,生成虚拟人播报视频。操作非常简单,效果也不错就是嘴型对不上。目前一些数字播报人都是这么整的
HeyGen
效果与D-ID类似,并且HeyGen有ChatGPT插件,plus会员可以直接在ChatGPT中生成视频。
Stable Diffusion+infinite zoom
Github开源的一个利用Stable Diffusion实现的无限放大和缩小照片
Kaiber 图片生成视频
上传一张图片或者通过提示词生成一张图片,然后基于这张图片绘制稍有变化的图片,从而形成视频
整理自 Notion – The all-in-one workspace for your notes, tasks, wikis, and databases.