Stable Diffusion 进阶与ComfyUI的高级图像生成

在基础篇中,我们介绍了 Stable Diffusion 的基本使用方法。本进阶篇将深入探讨 Stable Diffusion XL (SDXL) 的高级功能,并通过 ComfyUI 工具来演示如何构建和优化使用 SDXL 的 workflow。

模型概览

Stable Diffusion XL 是基于 Stable Diffusion v1.5 版本的升级,它具备以下显著优势:

  • 生成更高质量的图像
  • 图像细节更加丰富
  • 更好地理解复杂的 prompt
  • 支持更大尺寸的图像生成

ai_tutorial_comfy_ui_advanced_sd_advance_1

与 SD v1.5 相比,SDXL 的最大变化在于它采用了两阶段的图像创建过程:基础模型和细化模型。这种设计使得 SDXL 在图像细节上得到显著提升。

SDXL 的 Workflow 构建

使用 ComfyUI 构建 SDXL 的工作流程不仅仅是替换模型文件那么简单,它涉及到对 workflow 的重新设计,以适应两阶段图像生成的需要。

下载模型

首先,你需要下载以下两个模型文件并存放到 ComfyUI 的 models/checkpoints 文件夹内:

推荐下载含有 0.9 vae 的模型版本,它包含了优化的 vae 模型,可以提供更好的效果。

构建 Workflow

  1. 替换 KSampler: 在 ComfyUI 中,将默认的 KSampler 替换为 KSampler Advanced,以适配 SDXL 的两个模型。需要添加两个 KSampler 节点,并将它们串联起来。

    ai_tutorial_comfy_ui_advanced_sd_advance_2

  2. 配置 Checkpoint: 添加两个 Checkpoint 节点,第一个设置为 base 模型,第二个设置为 refiner 模型。这样能确保图像从基础构图到细节加工的无缝衔接。

    ai_tutorial_comfy_ui_advanced_sd_advance_3

  3. 连接 CLIP Text Encode: 为了简化操作,可以使用单一的输入框来控制两个 KSampler 的 prompt 输入。通过配置 Primitive STRING 和转换 text widget,可以将 prompt 输入统一管理。

    ai_tutorial_comfy_ui_advanced_sd_advance_4

  4. 调整 KSampler 参数: 为了统一管理并简化 workflow,将 KSampler 的关键参数如 steps、scheduler 等设置为可通过界面直接调整的 widgets。这样可以方便地在运行时调整这些参数,而无需进入节点内部。

    ai_tutorial_comfy_ui_advanced_sd_advance_5

  5. 优化图像质量: 最后,调整 Empty Latent Image 节点的分辨率至 1024x1024,确保生成的图像具有最佳质量。

效果对比

通过比较同一 prompt 下,仅使用 base 与同时使用 base 和 refiner 的效果,可以明显看到后者在自然性和细节上的提升。

ai_tutorial_comfy_ui_advanced_sd_advance_6

阅读全文
RPA
八爪鱼RPA
支持一键抓取公众号/小红书/抖音/淘宝数据
立即查看
流程自动化
付费
AI爆文训练营
图文变现友好赛道,低门槛、高上限,教你从0到1做个赚钱的公众号!
立即查看
躺着赚钱
¥149/年
何老师陪你做副业
这里聚焦AI副业、个人IP、自媒体运营、写作、赚钱案例。不哔哔,只分享有价值的副业项目。
立即查看
AI赚钱案例
限免
DeepSeek进阶教程
带你全面掌握DeepSeek应用技巧。提升工作、学习效率
立即查看
100万人学过
付费
网盘拉新实战教程
每周花费一小时,手把手教你赚网盘平台佣金
立即查看
500人学过
限时优惠
AiPPT
结合最新AI技术,为用户提供一键生成高质量PPT的解决方案。
立即查看
一键生成 PPT
免费
豆包MarsCode
一款免费的AI编程助手,全新支持DeepSeek R1/V3、豆包大模型1.5自由切换,免部署、更准确、更强大!
立即查看
AI编程助手
免费
Monica AI
Monica AI满血复活DeepSeek【免费】,提升您的聊天、搜索、写作和编程体验。
立即查看
一站式 AI 助手
云服务
腾讯云
综合性的云计算服务平台,现已接入DeepSeek,提供多样化的云解决方案
立即查看
高效可靠
云服务
阿里云
全球领先的云计算与数据服务平台,提供云服务器、存储、数据库、安全等多种服务
立即查看
多样化
DeepSeek企业微信码
免费领取DeepSeek资料