SadTalker一款开源的可生成逼真的人像动画的工具。它利用深度学习技术,根据输入的图像和音频,生成具有生动表情和动作的视频。用户可以通过上传照片或使用预设的模型,轻松创建个性化的动画内容.
以上是官网的图, 下边是本地部署生成的,效果差强人意, 可以自己玩玩.
一、本地部署SadTalker
- win11
- pythond3.8.10
强调一下python 必须是3.8.10.不要改别的.
1.1 开源地址
https://github.com/OpenTalker/SadTalker
1.2 部署步骤
根据官方文档步骤进行部署即可.
- 下载并安装python 3.8.10版本, 并配置好环境变量.
- 下载git并配置好, 或者下载 Scoop【win下的包管理工具】, 自行安装即可
- 使用scoop安装ffmpeg
- 通过git下载整个工程 git clone https://github.com/Winfredy/SadTalker.git
- 下载checkpoints和gfpgan, 这里往下翻,在github上直接下载就行
下载好之后,关键点来了,两个压缩包分别解压,将gfpgan解压完之后,进入解压目录,发现下边还有一个gfpgan目录,直接拷贝放到刚才以爰这git下载的工程当中,目录如下:
在工程的根目录下创建目录checkpoints,别写错单词了.将另一个压缩下的东西,解压之后,将之后放到checkpoints下即可.
启动整个项目,点击
相关插件安装完成之后,不出意外的话,可能会报错,报错的话,去github 当中的 issues去查一下,
在这里这, 可能发现, 下载一个包替换一下源码里的就行了: https://github.com/OpenTalker/SadTalker/issues/949
这会就可以启动使用了
还是点击webui.bat
浏览器打开http://127.0.0.1:7860
上传音频和图片,自己玩一下吧.