微信扫一扫 分享朋友圈

已有 1568 人浏览分享

数字人    数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程

2024-4-21 16:32:441568 0

生成视频效果演示


安装教程
提示:电脑太差的没有好显卡的就别装了,直接使用在线版本,对电脑配置自信的请按如下教程安装。

windows10安装


1、安装并Python3.8 并选中“将Python添加到PATH”。
https://www.python.org/downloads/release/python-3810/

数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(1)

2、安装Git或使用Scoop进行安装
打开电脑>运行,输入powershell,在 powershell里执行下面命令,一下全部复制过去就行。网速快的很快就装好了,慢的几分钟。
Set-ExecutionPolicy -ExecutionPolicy RemoteSigned -Scope CurrentUser
irm get.scoop.sh | iex
scoop install git

3、安装ffmpeg ,安照本教程或使用scoop进行安装。
接着在powershell里输入:  scoop install ffmpeg

4、通过运行下载 SadTalker 存储库
接着在输入 :git clone https://github.com/Winfredy/SadTalker.git

5、下载检查点和 gfpgan 模型。两个分别下载,
https://github.com/OpenTalker/SadTalker#2-download-models
第一个1.5G, 第二个600多MB


数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(2)

下载后解压文件夹,放到sadtalker的根目录

数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(3)
   注意 sadtalker 要改成 checkpoints 不改会出现 Failed in loading audio2pose_checkpoint   报错


数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(4)


6、运行webui.bat,并且将启动 Gradio 支持的 WebUI 演示,如果遇到启动失败的这个问题请按7进行修复

数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(5)

7、app_sadtalker.zip 修复错误
https://github.com/OpenTalker/SadTalker/files/13259997/app_sadtalker.zip
将下载好的这个修复文件,解压出来,复制到sadtalker根目录替换文件。
关掉之前的webui.bat重新启动,最终效果就是出现127这个地址,复制到浏览器打开就可以工作了


数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(6)

MacOS系统安装

https://github.com/OpenTalker/SadTalker/blob/main/docs/install.md

在线体验的两种方式


huggingface:https://huggingface.co/spaces/vinthony/SadTalker

discord:https://discord.com/invite/rrayYqZ4tf

生成操作和设置



数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(7)

正常运行的状态提示

都设置好了以后正常的提醒是下图这样的,会有执行进度条,打开你的 webui.bat可以看到执行的过程,其他问题会在这里报错,下一段会提供各种错误的解决办法。

数字人-数字人 SadTalker 一张图片一段语音/音乐 生成视频 安装使用教程(8)

生成错误和解决办法

遇到音频或者图片路径错误问题,请检查图片是否为空,音频路径是否为空的错误,解决办法是,将 音频文件和图片文件的名称改为 字母即可,不支持中文的。




  • 联系我们
  • 邮箱:1992608358#qq.com(请把#改成@)
  • 微信:mianfeixueai
  • QQ客服 1992608358
  • 工作时间:周一至周五(早上9点至下午5点)
  • 微信公众平台

  • 扫描访问手机版

QQ|NIUBOYI ( 京ICP备17025393号 )|网站地图

GMT+8, 2024-11-1 07:53 , Processed in 0.039481 second(s), 39 queries .

POWERED BY NIUBOYIAI! 主理人:NIUBOYIAI  点亮哥

Copyright © 2001-2020, NIUBOYI AI.