记录一下MAC跑通SadTalker的踩坑过程

项目链接:https://github.com/OpenTalker/SadTalker/tree/main

一、python依赖包下载

如下图所示,根据步骤一步一步执行即可,接下来说明一下我碰到了哪些问题及解决方法;
在这里插入图片描述

1、pip install torch==1.12.1+cu113报错找不到对应版本的pytorch

解决方法:因为我没有GPU,所以直接执行pip install torch==1.12.1,有GPU的需要下载跟cuda版本对应的pytorch。

2、执行pip install -r requirements.txt报错:ERROR: No matching distribution found for tb-nightly
解决方法

pip install tb_nightly==2.14.0a20230808 -i https://mirrors.aliyun.com/pypi/simple

因为我的conda只加了清华的镜像,里面找不到tb_nightly这个包,所以需要额外下载。执行完上述命令后重新执行
pip install -r requirements.txt。

3、MAC需要额外执行一个命令:

pip install dlib

执行时碰到以下报错:

ERROR: CMake must be installed to build dlib

解决方法:根据其报错信息可通过执行以下命令解决:

 brew install cmake

二、checkpoints和gfpgan下载

这个项目很贴心,readme里面给出了网盘地址,下载后记得在项目主目录下解压,主要用到的就是checkpoints文件夹和gfpgan/weights文件夹。

三、运行

我是采用命令行形式运行的:

python inference.py --driven ./sing.wav --source_image ./sadmouse.jpeg

1、出现如下报错:

OMP: Error #15: Initializing libomp.dylib, but found libomp.dylib already initialized.

解决方法:因为numpy库和torch库中有重复的libomp.dylib导致,如果要永久解决的话可以删去其中一个,我这边采用临时解决方法,即在inference.py中添加如下代码:

os.environ["KMP_DUPLICATE_LIB_OK"] = "TRUE"

注意该行代码一定在放在import torch前面。

2、landmark报错:

raise 'can not detect the landmark from source image'
TypeError: exceptions must derive from BaseException

是因为我放的source_image是一张老鼠的图片,而下载的模型是基于人脸训练的,无法识别老鼠,所以报错,替换人脸图片可解决。

3、warnings.warn('resource_tracker: There appear to be %d ’
这个不是一个报错,只是一个warning,但它会导致程序一直卡在这儿,碰到这个warning一定要终止程序。
解决方法

pip install librosa==0.10.1

总结:以上就是我跑通SadTalker碰到的所有坑和解决方法,但是因为我没有GPU生成视频的速度特别慢,而且效果看起来也不太理想,接下来看看有没有优化的方法。

  • 3
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
对于Mac上的SadTalker安装,你可以按照以下步骤进行操作: 1. 首先,确保你的Mac上已经安装了Python 3.10.6版本。你可以从官方网站上下载并安装Python 3.10.6版本。在安装过程中,请确保选中了"将Python添加到PATH"选项。 2. 接下来,你需要安装ffmpeg。请按照官方的说明下载并安装ffmpeg。 3. 下载SadTalker存储库。你可以从官方的存储库中下载SadTalker。 4. 下载并解压gfpgan checkpoint。 5. 进入SadTalker存储库的根目录,并执行webui.bat文件。 请注意,以上步骤适用于Mac系统。如果你在安装过程中遇到其他问题,比如检测到其他Python版本的问题,你可能需要卸载其他版本并删除残留的配置文件,然后重新安装Python 3.10.6并重启电脑。然后,删除SadTalker文件夹,重新解压并运行webui.bat文件。 希望以上步骤对你有帮助!123 #### 引用[.reference_title] - *1* [Mac和Windows一键安装Stable Diffusion WebUI,Lama Cleaner,SadTalker,等AI工具,使用国内镜像,无需魔法。](https://blog.csdn.net/weixin_43885000/article/details/131134885)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}} ] [.reference_item] - *2* *3* [sadtalker-- 本地生成数字人](https://blog.csdn.net/cs492934056/article/details/131764537)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值