一、SadTalker简介
SadTalker 是一个基于深度学习的AI 数字人制作工具,可以通过对照片中的人物进行动态化处理,生成具有头部运动和面部表情的数字人。该模型通过接收一张图片和一段音频文件,能够自动生成包含人脸动作(如张嘴、眨眼、移动头部等)的说话动画视频。
二、模型搭建流程
1.SadTalker 一键使用
- 在应用社区中搜索找到“SadTalker”模型,或下滑左侧功能选项中找到“数字人”应用栏,点击“配音”
- 在SadTalker页面中单击“创建应用”
在“租用实例”页面选择RTX 3060后单击“立即创建”
2. 进入网页端命令行
-
点击WebShell进入终端
-
使用下列命令运行项目:
conda activate sadtalker
cd SadTalkerexport
GRADIO_SERVER_NAME=0.0.0.0
export GRADIO_SERVER_PORT=8080
python app_sadtalker.py
3. 获取端口号
- 在此页面点击”开放端口“按钮在出现的弹窗选择”对外开放端口“后单击“获取访问地址”
4. 进入Web 页面
- 打开一个新的网页,将得到网址进行粘贴,模型界面成功打开
- 上传音频和图片
- 前端界面显示:
-
后端控制台显示:
以上就是在算家云搭建 SadTalker的流程,具体使用方式可进入算家云应用社区查看该模型的使用说明。
点击算家云-应用社区 ,选择模型,一键开启 AI 之旅!