主要功能
- 高质量唇形同步:使用先进的扩散模型生成自然的嘴唇动作
- 改进的时间一致性:LatentSync 1.5 版本提供了显著改进的时间层实现
- 增强的中文支持:通过额外的训练数据,大幅提升了中文视频的处理效果
安装方法
第一种
通过manager搜索 latentsync下载即可。
第二种
- 进入 ComfyUI 的
custom_nodes
目录,并打开cmd - 使用以下命令克隆仓库:
git clone https://github.com/ShmuelRonen/ComfyUI-LatentSyncWrapper.git
- 进入文件夹
cd ComfyUI-LatentSyncWrapper
- 安装相应库文件
==虚拟环境==
pip install -r requirements.txt
==内置python环境==
python -m pip install -r requirements.txt
模型下载
模型下载地址:点击跳转,全部下载放到custom_nodes\ComfyUI-LatentSyncWrapper\checkpoints
文件夹,注意是插件的checkpoints文件夹,不是ComfyUI模型的。
另外,该插件的使用还需要下载ffmpeg,点击下载
还需要配置系统环境变量。比如我将该软件放置在D盘,则需要将其中的bin目录配置到系统环境。