ComfyUI-LatentSyncWrapper插件

前言

​ ComfyUI-LatentSyncWrapper 是一个为 ComfyUI 提供高级唇形同步功能的插件，基于字节跳动的 LatentSync 1.5 模型实现。该插件允许用户将视频中的嘴唇动作与音频输入同步，提供改进的时间一致性和更好的多语言支持。

主要功能

• 高质量唇形同步：使用先进的扩散模型生成自然的嘴唇动作
• 改进的时间一致性：LatentSync 1.5 版本提供了显著改进的时间层实现
• 增强的中文支持：通过额外的训练数据，大幅提升了中文视频的处理效果

---

安装方法

第一种

通过manager搜索 latentsync下载即可。

第二种

1. 进入 ComfyUI 的 custom_nodes 目录，并打开cmd
2. 使用以下命令克隆仓库：

git clone https://github.com/ShmuelRonen/ComfyUI-LatentSyncWrapper.git

3. 进入文件夹

cd ComfyUI-LatentSyncWrapper

4. 安装相应库文件

==虚拟环境==

pip install -r requirements.txt

==内置python环境==

python -m pip install -r requirements.txt

---

模型下载

模型下载地址：点击跳转，全部下载放到custom_nodes\ComfyUI-LatentSyncWrapper\checkpoints文件夹，注意是插件的checkpoints文件夹，不是ComfyUI模型的。

---

另外，该插件的使用还需要下载ffmpeg，点击下载

还需要配置系统环境变量。比如我将该软件放置在D盘，则需要将其中的bin目录配置到系统环境。