ComfyUI-LatentSyncWrapper>Overview

# 标签

表情驱动数字人语音合成AI 虚拟主播中文音频支持AI视频生成语音驱动视频唇形同步
ComfyUI-LatentSyncWrapper
时间:2025/06/28

ComfyUI-LatentSyncWrapper插件

GitHub网址https://github.com/ShmuelRonen/ComfyUI-LatentSyncWrapper
GitHub星数862
插件作者ShmuelRonen
插件最近更新时间2025/06/14
​       ComfyUI-LatentSyncWrapper 是一个为 ComfyUI 提供高级唇形同步功能的插件,基于字节跳动的 LatentSync 1.5 模型实现。该插件允许用户将视频中的嘴唇动作与音频输入同步,提供改进的时间一致性和更好的多语言支持。

主要功能

  • 高质量唇形同步:使用先进的扩散模型生成自然的嘴唇动作
  • 改进的时间一致性:LatentSync 1.5 版本提供了显著改进的时间层实现
  • 增强的中文支持:通过额外的训练数据,大幅提升了中文视频的处理效果

安装方法

第一种

通过manager搜索 latentsync下载即可。

第二种

  1. 进入 ComfyUI 的 custom_nodes 目录,并打开cmd
  2. 使用以下命令克隆仓库:
git clone https://github.com/ShmuelRonen/ComfyUI-LatentSyncWrapper.git

  1. 进入文件夹
cd ComfyUI-LatentSyncWrapper
  1. 安装相应库文件

==虚拟环境==

pip install -r requirements.txt

==内置python环境==

python -m pip install -r requirements.txt

模型下载

模型下载地址:点击跳转,全部下载放到custom_nodes\ComfyUI-LatentSyncWrapper\checkpoints文件夹,注意是插件的checkpoints文件夹,不是ComfyUI模型的。


另外,该插件的使用还需要下载ffmpeg点击下载

还需要配置系统环境变量。比如我将该软件放置在D盘,则需要将其中的bin目录配置到系统环境

广告

可加入知识星球获取所有示例工作流

广告

微信扫码入群,加入AIGC大家庭,与大家一起交流学习