中文(繁體)

目前位置: 首頁> AI 課程> AI 基礎入門

ComfyUI 工作流教程(文生圖、圖生圖、ControlNet、Inpainting)

作者: LoRA 時間: 2025年03月10日 1031

Stable Cascade 是 Stability AI 于 2024 年 2 月发布的文本生成图像(txt2img)模型。该模型采用创新的三阶段方法,在质量、灵活性、微调和效率方面设立了新标准,同时降低了对硬件的要求。Stability AI 还在其官方 GitHub 上发布了训练和推理代码,方便用户自定义模型及其输出。Stable Cascade 兼容 diffusers 库,可用于推理任务。

本文将介绍如何在 ComfyUI 中使用 Stable Cascade,涵盖 文本生成图像(txt2img)、图像生成图像(img2img)、图像变体(image variants)、控制网络(ControlNet)以及内部绘制(Inpainting) 工作流程。

Stable Cascade 运行环境与文件下载

在 ComfyUI 中使用 Stable Cascade 需要下载以下模型文件:

Stable Cascade 采用 三阶段流程

  1. 阶段 C:扩散模型生成低分辨率潜在图像。

  2. 阶段 B:扩散模型对潜在图像进行放大。

  3. 阶段 A:VAE 将放大的潜在图像转换为可见像素空间。

Stable Cascade 工作流程示例

1. 文生图(txt2img)

该流程可用于从文本提示词生成全新图像。

工作流程

下载并加载 HY_stable_cascade__text_to_image.json 工作流。

image-39-1024x463 (1).png

示例 Prompt

evening sunset scenery blue sky nature, glass bottle with a fizzy ice cold freezing rainbow liquid in it

生成效果:

image-40.png

2. 图生图(img2img)

该流程基于输入图像生成新的变体,同时参考文本提示词。

工作流程

下载 HY_stable_cascade__image_to_image.json 并加载到 ComfyUI。

image-41-1024x422.png

示例 Prompt

evening sunset scenery blue sky nature, glass bottle with a fizzy ice cold freezing rainbow liquid in it

生成效果:

image-42.png

3. 图像变体(image variants)

Stable Cascade 支持使用 CLIP 视觉模型生成输入图像的变体。

工作流程

下载 HY_stable_cascade__image_remixing.json 并加载到 ComfyUI。

image-43-1024x410.png

示例 Prompt

evening sunset scenery blue sky nature, glass bottle with a fizzy ice cold freezing liquid in it

生成效果:

image-44.png

4. 多图片混合(Image Mixing)

可同时输入多个图片,并融合生成新的图像。

工作流程

下载 HY_stable_cascade__image_remixing_multiple.json

image-45-1024x445.png

示例 Prompt

evening sunset scenery blue sky nature, glass bottle with a fizzy ice cold freezing liquid in it

生成效果:

image-46.png

5. 控制网络(ControlNet)

利用 ControlNet 控制图像生成的构图,如线稿填色、深度图控制等。

工作流程

下载 HY_stable_cascade__canny_controlnet.json,并确保 stable_cascade_canny.safetensors 文件已存放在 ComfyUI/models/controlnet 文件夹中。

image-47-1024x414.png

image-48-1024x302.png

示例 Prompt

evening sunset scenery blue sky nature, glass bottle with a fizzy ice cold freezing rainbow liquid in it

生成效果:

image-49.png

6. 内部绘制(Inpainting)

用于修复或修改图像中的特定区域。

工作流程

下载 HY_stable_cascade__inpaint_controlnet.json,并确保 stable_cascade_inpainting.safetensors 已存放在 ComfyUI/models/controlnet

输入的示例图片可以从这里下载:yosemite_inpaint_example.png 

image-50-1024x345.png

image-52-1024x357.png

  1. 右键单击 LoadImage 节点的图像

  2. 使用遮罩工具选择要修改的区域

  3. 输入新的 Prompt 进行填充

示例 Prompt

evening sunset scenery blue sky nature, glass bottle with a fizzy ice cold freezing rainbow liquid in it

生成效果:

image-53.png

总结

Stable Cascade 作为 Stability AI 推出的新一代文本生成图像模型,具有高效、灵活、可微调的特点。通过 ComfyUI,用户可以实现 文生图、图生图、图像变体、ControlNet 约束生成以及 Inpainting 细节修复,大幅提升 AI 绘画的创作自由度。

如果你想体验更强大的图像生成功能,建议下载 ComfyUI 并尝试 Stable Cascade 工作流!