ControlNet v1.1 模型支持stable diffusion 1.5 或2.0
stable diffusion 1.5 和stable diffusion 2.0的模型是兼容的,所以ControlNet v1.1的模型文件也可以在stable diffusion 2.0上使用。
這篇文章是ComfyuUI-Wiki 整理的不同類型的支持SD1.5 / 2.0 的ControlNet 模型
ControlNet v1.1 對應模型文件及下載
Large - 較大體積來自lllyasviel 提供的版本
提供者: lllyasviel
Github主頁: https://github.com/lllyasviel/ControlNet-v1-1-nightly
Hugging face倉庫: https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
兼容Stable diffusion 版本: stable diffusion v1.5
模型文件大小: 1.45 GB 較大
文件名 | 大小 | 更新時間 | 說明 | 下載鏈接 |
---|---|---|---|---|
control_v11e_sd15_ip2p.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11e_sd15_shuffle.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11f1e_sd15_tile.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11f1p_sd15_depth.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_canny.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_inpaint.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_lineart.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_mlsd.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_normalbae.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_openpose.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_scribble.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_seg.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15_softedge.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 | |
control_v11p_sd15s2_lineart_anime.pth | 1.45 GB | 2023年5月25日 | 下載鏈接 |
Medium - Safetensors/FP16 中等體積,來自comfyanonymous 提供的版本
提供者:comfyanonymous
Huggingface 倉庫地址: https://huggingface.co/comfyanonymous/ControlNet-v1-1_fp16_safetensors/tree/main
模型文件大小: 723MB
說明: 由ComfyUI 作者huggingface 倉庫提供,在ComfyUI 中使用體驗更好,也兼容其他UI
文件名 | 大小 | 日期 | 下載鏈接 |
---|---|---|---|
control_v11e_sd15_ip2p_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11e_sd15_shuffle_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11f1e_sd15_tile_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11f1p_sd15_depth_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_canny_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_inpaint_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_lineart_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_mlsd_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_normalbae_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_openpose_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_scribble_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_seg_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15_softedge_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11p_sd15s2_lineart_anime_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
control_v11u_sd15_tile_fp16.safetensors | 723 MB | 2023年4月 | 下載鏈接 |
Small - Control lora Safetensors/FP16 較小體積來自comfyanonymous 提供的版本
提供者:comfyanonymous
Huggingface 倉庫地址: https://huggingface.co/comfyanonymous/ControlNet-v1-1_fp16_safetensors/tree/main
模型文件大小: 136MB較小
說明: 由ComfyUI 作者huggingface 倉庫提供,在ComfyUI 中使用體驗更好,也兼容其他UI
文件名 | 大小 | 日期 | 下載鏈接 |
---|---|---|---|
control_lora_rank128_v11e_sd15_ip2p_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11e_sd15_shuffle_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11f1e_sd15_tile_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11f1p_sd15_depth_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_canny_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_inpaint_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_lineart_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_mlsd_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_normalbae_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_openpose_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_scribble_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_seg_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15_softedge_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
control_lora_rank128_v11p_sd15s2_lineart_anime_fp16.safetensors | 136 MB | 2023年4月 | 下載鏈接 |
ControlNet for StableDiffusion 2.1
作者: thibaud
Hugging face倉庫: https://huggingface.co/thibaud/controlnet-sd21
兼容Stable diffusion 版本: stable diffusion v2.1
下面文件格式有分為 .safetensors 和 .ckpt 兩種格式,通常如果你只是要使用對應的模型,則下載.safetensors 的文件即可
文件名 | 大小 | 更新時間 | 說明 | 下載鏈接 |
---|---|---|---|---|
control_v11p_sd21_ade20k.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_canny.ckpt | 9.59 GB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_canny.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_color.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_depth.ckpt | 9.59 GB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_depth.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_hed.ckpt | 9.59 GB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_hed.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_lineart.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_normalbae.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_openpose.ckpt | 9.59 GB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_openpose.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_openposev2.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_scribble.ckpt | 9.59 GB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_scribble.safetensors | 728 MB | 2023年4月 | 下載鏈接 | |
control_v11p_sd21_zoedepth.safetensors | 728 MB | 2023年4月 | 下載鏈接 |
controlNet 1.1模型概述
ControlNet 1.1 是在ControlNet 1.0的基礎上進行更新和優化的版本,具有相同的體系結構。它包括了所有以前的模型,並且增加了幾個新的模型,使得總數量達到了14個。
新功能與改進ControlNet 1.1 引入了一些新功能和改進:
新型軟邊緣:新增了一種名為“SoftEdge_safe”的軟邊緣處理方式,以提高圖像邊緣的自然度。
預處理器擴展:新增了多個預處理器,如Canny、Depth、inpaint等,這些預處理器可以用於不同的圖像處理任務。
魯棒性和質量提升:版本主要增強了模型的魯棒性和生成圖像的質量。
controlNet 1.1 應用場景
ControlNet 1.1 可以應用於多種AI繪畫場景,包括但不限於:
圖像修復:利用inpaint預處理器對破損或缺失的圖像部分進行填充和修復。 邊緣檢測:使用Canny預處理器提取圖像的邊緣信息,進一步應用於其他圖像處理任務。 深度圖生成:通過Depth預處理器生成圖像的深度信息,用於創建更加立體的視覺效果。