- 高噪声专家:处理降噪初期的高度噪声输入,负责建立视频的大体结构与布局。
- 低噪声专家:处理后期逐步去噪的输入,负责精细化纹理与视觉细节的生成。
如下图。为不同类型的Wan模型表现情况,Loss越低越效果好。
值得注意的是,Wan2.1是可以搭配Wan2,2的专家模型使用的。
- Wan2.2(MoE): High-Noise Expert & Low-Noise Expert,表现效果最好
- Wan2.1 & High-Noise Expert将 Wan2.1 模型重用为低噪声专家,同时使用 Wan2.2 的高噪声专家;表现效果其次
- Wan2.1 & Low-Noise Expert将 Wan2.1 模型用作高噪声专家,并使用 Wan2.2 的低噪声专家。
- Wan2.1:相对表现最差
1、ComfyUI官方 Wan2.2 版本下载
1.1 diffusion models下载
1.1.1 文生视频T2V
模型名称 | 参数量 | 主要功能 | 下载地址 |
---|---|---|---|
wan2.2_t2v_high_noise_14B_fp8_scaled.safetensors | 14B | 负责建立视频的大体结构与布局 | 点击下载 |
wan2.2_t2v_low_noise_14B_fp8_scaled.safetensors | 14B | 负责精细化纹理与视觉细节的生成 | 点击下载 |
以上模型放置到ComfyUI/models/diffusion_models文件夹
1.1.2 图生视频I2V
模型名称 | 参数量 | 主要功能 | 下载地址 |
---|---|---|---|
Wan2_2-I2V-A14B-HIGH_bf16.safetensors | 14B | 负责建立视频的大体结构与布局 | 点击下载 |
Wan2_2-I2V-A14B-LOW_bf16.safetensors | 14B | 负责精细化纹理与视觉细节的生成 | 点击下载 |
wan2.2_i2v_high_noise_14B_fp16.safetensors | 14B | 负责建立视频的大体结构与布局 | 点击下载 |
wan2.2_i2v_low_noise_14B_fp16.safetensors | 14B | 负责精细化纹理与视觉细节的生成 | 点击下载 |
以上bf16和fp16模型任选一组放置到ComfyUI/models/diffusion_models文件夹
1.1.3 混合模型TI2V
模型名称 | 参数量 | 主要功能 | 下载地址 |
---|---|---|---|
wan2.2_ti2v_5B_fp16.safetensors | 5B | 既能文生视频,也能图生视频 | 点击下载 |
该模型放置到ComfyUI/models/diffusion_models文件夹
1.2 Text Encoder模型下载
模型放置ComfyUI/models/text_encoders文件夹
1.3 VAE模型下载
注意:
- 如果使用的是14B模型,则使用Wan2.1的vae模型即可,wan_2.1_vae.safetensors,下载后放置到ComfyUI/models/vae文件夹。
- 如果使用的是5B混合模型,则需要使用Wan2.2的vae模型,wan2.2_vae.safetensors,下载后放置到ComfyUI/models/vae文件夹。
2、Kijai Wan2.2 版本下载
使用该版本需要搭配 https://github.com/kijai/ComfyUI-WanVideoWrapper 插件使用。
2.1 diffusion models下载
2.1.1 文生视频T2V
模型名称 | 参数量 | 主要功能 | 下载地址 |
---|---|---|---|
Wan2_2-T2V-A14B-LOW_fp8_e4m3fn_scaled_KJ.safetensor | 14B | 负责建立视频的大体结构与布局 | 点击下载 |
Wan2_2-T2V-A14B-LOW_fp8_e5m2_scaled_KJ.safetensor | 14B | 负责精细化纹理与视觉细节的生成 | 点击下载 |
Wan2_2-T2V-A14B-HIGH_fp8_e4m3fn_scaled_KJ.safetensor | 14B | 负责建立视频的大体结构与布局 | 点击下载 |
Wan2_2-T2V-A14B-HIGH_fp8_e5m2_scaled_KJ.safetensor | 14B | 负责精细化纹理与视觉细节的生成 | 点击下载 |
以上e4m3fn和e5m2模型分别下载一组(LOW和HIGH)即可,这两组模型只是量化后的精度会有些许差别,但差别不是很大。模型放置到ComfyUI/models/diffusion_models文件夹
2.1.2 图生视频I2V
模型名称 | 参数量 | 主要功能 | 下载地址 |
---|---|---|---|
Wan2_2-I2V-A14B-LOW_fp8_e4m3fn_scaled_KJ.safetensor | 14B | 负责建立视频的大体结构与布局 | 点击下载 |
Wan2_2-I2V-A14B-LOW_fp8_e5m2_scaled_KJ.safetensor | 14B | 负责精细化纹理与视觉细节的生成 | 点击下载 |
Wan2_2-I2V-A14B-HIGH_fp8_e4m3fn_scaled_KJ.safetensor | 14B | 负责建立视频的大体结构与布局 | 点击下载 |
Wan2_2-I2V-A14B-HIGH_fp8_e5m2_scaled_KJ.safetensor | 14B | 负责精细化纹理与视觉细节的生成 | 点击下载 |
以上e4m3fn和e5m2模型分别下载一组(LOW和HIGH)即可,这两组模型只是量化后的精度会有些许差别,但差别不是很大。模型放置到ComfyUI/models/diffusion_models文件夹
2.1.3 混合模型TI2V
模型名称 | 参数量 | 主要功能 | 下载地址 |
---|---|---|---|
Wan2_2-TI2V-5B_fp8_e4m3fn_scaled_KJ.safetensors | 5B | 既能文生视频,也能图生视频 | 点击下载 |
Wan2_2-TI2V-5B_fp8_e5m2_scaled_KJ.safetensors | 5B | 既能文生视频,也能图生视频 | 点击下载 |
以上e4m3fn和e5m2模型分别下载一个即可,这两组模型只是量化后的精度会有些许差别,但差别不是很大。模型放置到ComfyUI/models/diffusion_models文件夹
2.2 Text Encoder模型下载
模型名称 | 精度 | 占用显存 | 下载地址 |
---|---|---|---|
umt5-xxl-enc-bf16.safetensors | 高 | 大 | 点击下载 |
umt5-xxl-enc-fp8_e4m3fn.safetensors | 低 | 小 | 点击下载 |
以上两个模型选择一个下载即可,模型放置到ComfyUI/models/text_encoders文件夹
2.3 VAE模型下载
模型名称 | 精度 | 占用显存 | 下载地址 |
---|---|---|---|
Wan2_1_VAE_fp32.safetensors | 高 | 大 | 点击下载 |
Wan2_1_VAE_bf16.safetensors | 低 | 小 | 点击下载 |
也能搭配ComfyUI官方的wan_2.1_vae.safetensors使用,选择一个即可,下载后放置到ComfyUI/models/vae文件夹。