分享一波文字转语音、语音转文字!AI视频生成神器!让外国人说中文,口型自然,不限语言,感兴趣的同学可以试试~
可以用Al生成视频,Whisper语音转文字
-
Whisper 开源项目:
https://github.com/Const-me/Whisper/releases/tag/1.8.1
-
ggml-medium 语音模型:
https://huggingface.co/openai/whisper-large-v2
-
CPU版的Whisper:
https://github.com/chidiwilliams/buzz
-
Al视频生成:
https://www.heygen.com
可以生成语音对口型的视频!Wav2Lip离线版V1.0
下载链接:https://www.mediafire.com/
流程方法:
1
Al视频生成:
https://www.heygen.com
Wav2Lip离线版:
https://www.freedidi.com/10734.html
下载并安装Docker:
https://www.docker.com/
2
使用开源项目:潘多拉 (Pandora)
https://github.com/orgs/community/discussions/
3
安装指令
docker pull pengzhile/pandora
docker run -e PANDORA_CLOUD=cloud -e PANDORA_SERVER=0.0.0.0:8899 -p 8899:8899 -d pengzhile/pandora
4
获取自己的 Access TOKEN:
http://chat.openai.com/api/auth/session
5
访问本地链接:http://127.0.0.1:8899
搞定!
GEN2 Runway:https://runwayml.com/