ComfyUI 魔法书 Logo
🏠 首页
👥 加群
🔥 报错不求人
😎 大帅比
登录 →
ComfyUI 魔法书 Logo
🏠 首页 👥 加群 🔥 报错不求人 😎 大帅比
登录
  1. 首页
  2. 🧩 插件工坊 (Plugin Workshop)
  3. ComfyUI新手必学Diffusers插件安装使用教程

ComfyUI新手必学Diffusers插件安装使用教程

0
  • 🧩 插件工坊 (Plugin Workshop)
  • 发布于 2025-07-03
  • 8 次阅读
编程界的小学生
编程界的小学生

Diffusers-in-ComfyUI 插件完全新手教程

1. 插件简介

GitHub原地址: https://github.com/maepopi/Diffusers-in-ComfyUI

这个插件就像是给ComfyUI装上了一个超级强大的图片生成器。想象一下,原本的ComfyUI就像一个基础的画图工具,而这个插件就是给它加上了各种专业的画笔和调色板。

这个插件能让你在ComfyUI里面使用各种高级的图片生成功能,比如:

  • 把文字变成图片(就像跟电脑说"画个猫",它就能画出来)
  • 把一张图片改成另一种风格(比如把照片变成油画风格)
  • 填补图片中的空白部分(就像PS的修复工具,但更聪明)
  • 控制图片的细节(比如让生成的图片按照你指定的线条来画)

2. 如何安装

方法一:通过ComfyUI管理器安装(最简单)

  1. 打开ComfyUI
  2. 点击界面上的"管理器"按钮
  3. 在搜索框里输入"Diffusers in Comfy UI"
  4. 找到后点击安装
  5. 重启ComfyUI就能用了

方法二:通过命令行安装

如果你会用命令行,可以输入:

comfy node registry-install diffusers-in-comfyui

3. 节点详细解析

安装完成后,你会在ComfyUI的节点列表里看到一个叫"Diffusers-in-Comfy"的分类,里面包含了以下几个子分类:

3.1 Pipelines(流水线节点)- 就像画图的工作台

这些节点就像不同的画图工作台,每个工作台专门用来做一种类型的画图任务。

3.1.1 Text2ImgStableDiffusionPipeline(文字生成图片工作台)

这个节点就像一个听话的画家,你用文字描述,它就能画出来。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
模型路径model_path文本输入留空使用默认告诉工作台用哪个画图模型,就像选择用油画笔还是水彩笔指定要加载的Stable Diffusion模型路径写"runwayml/stable-diffusion-v1-5"或本地路径
是否使用SDXLis_sdxl真/假假选择是否用更高级的画图模型,就像选择用高级画笔还是普通画笔启用SDXL架构以获得更高质量的图像生成如果用SDXL模型就选"真"
VAE路径vae_path文本输入留空选择图片的编码解码器,就像选择照片的冲印方式指定VAE模型路径用于图像编码解码写"stabilityai/sd-vae-ft-mse"
ControlNet路径controlnet_path文本输入留空选择控制图片细节的工具,就像用模板来指导画图指定ControlNet模型路径用于精确控制图像生成写"XLabs-AI/flux-controlnet-canny"
低显存模式low_vram真/假假如果你的显卡比较弱,开启这个能让程序跑得更稳定启用低显存优化,减少GPU内存使用显卡显存小于8G建议开启

3.1.2 Img2ImgStableDiffusionPipeline(图片改图片工作台)

这个节点就像一个能够模仿和改造的画家,你给它一张图片,它能画出类似但不完全一样的新图片。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
模型路径model_path文本输入留空使用默认告诉工作台用哪个画图模型,就像选择用油画笔还是水彩笔指定要加载的Stable Diffusion模型路径写"runwayml/stable-diffusion-v1-5"或本地路径
是否使用SDXLis_sdxl真/假假选择是否用更高级的画图模型,就像选择用高级画笔还是普通画笔启用SDXL架构以获得更高质量的图像生成如果用SDXL模型就选"真"
VAE路径vae_path文本输入留空选择图片的编码解码器,就像选择照片的冲印方式指定VAE模型路径用于图像编码解码写"stabilityai/sd-vae-ft-mse"
ControlNet路径controlnet_path文本输入留空选择控制图片细节的工具,就像用模板来指导画图指定ControlNet模型路径用于精确控制图像生成写"XLabs-AI/flux-controlnet-canny"
低显存模式low_vram真/假假如果你的显卡比较弱,开启这个能让程序跑得更稳定启用低显存优化,减少GPU内存使用显卡显存小于8G建议开启

3.1.3 InpaintingStableDiffusionPipeline(修复填补工作台)

这个节点就像一个修复专家,能够智能地填补图片中的空白或不想要的部分。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
模型路径model_path文本输入留空使用默认告诉工作台用哪个画图模型,就像选择用油画笔还是水彩笔指定要加载的Stable Diffusion模型路径写"runwayml/stable-diffusion-v1-5"或本地路径
是否使用SDXLis_sdxl真/假假选择是否用更高级的画图模型,就像选择用高级画笔还是普通画笔启用SDXL架构以获得更高质量的图像生成如果用SDXL模型就选"真"
VAE路径vae_path文本输入留空选择图片的编码解码器,就像选择照片的冲印方式指定VAE模型路径用于图像编码解码写"stabilityai/sd-vae-ft-mse"
ControlNet路径controlnet_path文本输入留空选择控制图片细节的工具,就像用模板来指导画图指定ControlNet模型路径用于精确控制图像生成写"XLabs-AI/flux-controlnet-canny"
低显存模式low_vram真/假假如果你的显卡比较弱,开启这个能让程序跑得更稳定启用低显存优化,减少GPU内存使用显卡显存小于8G建议开启

3.2 Inference(推理节点)- 就像实际画图的画笔

这些节点就是实际干活的画笔,每个画笔专门用来做一种画图任务。

3.2.1 GenerateTxt2Image(文字变图片画笔)

这个节点就像一支魔法画笔,你说什么它就画什么。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
控制图片controlnet_image图片输入留空用来指导画图的参考图,就像画画时的草稿用于ControlNet引导的参考图像连接线条图或边缘图
控制强度controlnet_scale0.0-2.01.0参考图的影响力大小,就像临摹时看原图的程度ControlNet对生成结果的影响强度0.5表示轻微影响,1.5表示强烈影响
随机种子seed整数-1画图的起始点,相同种子会画出相似的图控制随机性的种子值,确保结果可重现设置42会每次生成相同风格的图
正面描述positive_prompt文本输入必填告诉画笔你想要什么,就像给画家下订单正面提示词,描述想要生成的内容写"a cute cat sitting on a table"
负面描述negative_prompt文本输入可选告诉画笔你不想要什么,就像告诉画家别画什么负面提示词,描述不想要的内容写"blurry, ugly, bad quality"
推理步数inference_steps1-10050画图的精细程度,步数越多画得越仔细扩散模型的去噪步数,影响生成质量20步快速预览,50步正常质量
图片宽度width64-2048512画出来的图片有多宽,就像画布的宽度生成图像的像素宽度512适合方形图,768适合竖图
图片高度height64-2048512画出来的图片有多高,就像画布的高度生成图像的像素高度512适合方形图,768适合横图
引导强度guidance_scale1.0-30.07.5遵循你描述的程度,数值越高越严格按描述画CFG引导强度,控制对提示词的遵循程度5-10适合大多数情况

3.2.2 GenerateImg2Image(图片改图片画笔)

这个节点就像一个能够改造图片的魔法画笔,给它一张图片,它能画出改良版本。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
输入图片路径input_image_path文本输入必填要改造的图片在电脑里的位置,就像告诉画家参考图在哪里输入图像的文件路径写"C:/images/my_photo.jpg"
控制图片controlnet_image图片输入留空用来指导画图的参考图,就像画画时的草稿用于ControlNet引导的参考图像连接线条图或边缘图
控制强度controlnet_scale0.0-2.01.0参考图的影响力大小,就像临摹时看原图的程度ControlNet对生成结果的影响强度0.5表示轻微影响,1.5表示强烈影响
随机种子seed整数-1画图的起始点,相同种子会画出相似的图控制随机性的种子值,确保结果可重现设置42会每次生成相同风格的图
正面描述positive_prompt文本输入必填告诉画笔你想要什么效果,就像给画家下订单正面提示词,描述想要的改变效果写"oil painting style, vibrant colors"
负面描述negative_prompt文本输入可选告诉画笔你不想要什么效果,就像告诉画家别画什么负面提示词,描述不想要的内容写"blurry, ugly, bad quality"
推理步数inference_steps1-10050画图的精细程度,步数越多画得越仔细扩散模型的去噪步数,影响生成质量20步快速预览,50步正常质量
图片宽度width64-2048512画出来的图片有多宽,就像画布的宽度生成图像的像素宽度通常与输入图片尺寸一致
图片高度height64-2048512画出来的图片有多高,就像画布的高度生成图像的像素高度通常与输入图片尺寸一致
引导强度guidance_scale1.0-30.07.5遵循你描述的程度,数值越高越严格按描述画CFG引导强度,控制对提示词的遵循程度5-10适合大多数情况

3.2.3 GenerateInpaintImage(修复填补画笔)

这个节点就像一个智能修复工具,能够填补图片中的空白或替换不想要的部分。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
输入图片路径input_image_path文本输入必填要修复的图片在电脑里的位置,就像告诉修复师原图在哪里输入图像的文件路径写"C:/images/damaged_photo.jpg"
遮罩图片路径input_mask_path文本输入必填标记要修复区域的图片位置,就像用贴纸标记破损部分遮罩图像的文件路径,白色区域会被重新生成写"C:/images/mask.jpg"
控制图片controlnet_image图片输入留空用来指导画图的参考图,就像画画时的草稿用于ControlNet引导的参考图像连接线条图或边缘图
控制强度controlnet_scale0.0-2.01.0参考图的影响力大小,就像临摹时看原图的程度ControlNet对生成结果的影响强度0.5表示轻微影响,1.5表示强烈影响
随机种子seed整数-1画图的起始点,相同种子会画出相似的图控制随机性的种子值,确保结果可重现设置42会每次生成相同风格的图
正面描述positive_prompt文本输入必填告诉画笔你想要填补什么内容,就像给修复师下订单正面提示词,描述想要填补的内容写"grass field, natural lighting"
负面描述negative_prompt文本输入可选告诉画笔你不想要什么内容,就像告诉修复师别画什么负面提示词,描述不想要的内容写"blurry, ugly, bad quality"
推理步数inference_steps1-10050画图的精细程度,步数越多画得越仔细扩散模型的去噪步数,影响生成质量20步快速预览,50步正常质量
图片宽度width64-2048512画出来的图片有多宽,就像画布的宽度生成图像的像素宽度通常与输入图片尺寸一致
图片高度height64-2048512画出来的图片有多高,就像画布的高度生成图像的像素高度通常与输入图片尺寸一致
引导强度guidance_scale1.0-30.07.5遵循你描述的程度,数值越高越严格按描述画CFG引导强度,控制对提示词的遵循程度5-10适合大多数情况

3.3 Utils(工具节点)- 就像画图的辅助工具

这些节点就像各种画图的辅助工具,帮你处理图片,让画图效果更好。

3.3.1 Make Canny(制作线条图工具)

这个节点就像一个能够提取图片线条的工具,把彩色图片变成黑白线条图。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
输入图片input_image图片输入必填要提取线条的图片,就像要描边的原图输入的原始图像连接任何图片节点
低阈值low_threshold0-255100线条检测的敏感度下限,数值越低检测到的细节越多Canny边缘检测的低阈值参数50检测更多细节,150检测主要轮廓
高阈值high_threshold0-255200线条检测的敏感度上限,数值越高只保留明显的线条Canny边缘检测的高阈值参数通常设置为低阈值的2倍

输出:

  • 线条图输出:处理后的黑白线条图,可以连接到推理节点的控制图片输入
  • 预览输出:可以连接到预览节点查看线条图效果

3.4 Components(组件节点)- 就像画图的特殊材料

这些节点就像各种特殊的画图材料,能够给你的画图工作台增加特殊能力。

3.4.1 LoraLoader(特殊风格加载器)

这个节点就像一个特殊风格的调色板,能够给你的画图工作台增加特定的绘画风格。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
LoRA名称lora_name文本输入必填特殊风格文件的名字,就像选择哪种调色板LoRA模型的文件名写"anime_style.safetensors"
权重weight0.0-2.01.0这种风格的影响力大小,就像调色板的浓度LoRA在模型中的权重系数0.5表示轻微影响,1.5表示强烈影响
触发词trigger_word文本输入可选激活这种风格的魔法词语,就像召唤咒语激活LoRA效果的特定词汇写"anime style"或"portrait"

3.4.2 Blora(风格内容分离器)

这个节点就像一个神奇的分离器,能够把一张图片的风格和内容分开,让你只借用风格或只借用内容。

参数名 (UI显示)参数名 (代码里)参数值建议值通俗解释专业解释怎么用/举个例子
风格LoRA名称style_lora_name文本输入可选风格文件的名字,就像选择画风调色板风格B-LoRA模型的文件名写"vangogh_style.safetensors"
风格权重style_lora_scale0.0-2.01.0风格的影响力大小,就像画风的浓度风格B-LoRA的权重系数0.8表示轻微风格,1.2表示强烈风格
内容LoRA名称content_lora_name文本输入可选内容文件的名字,就像选择画什么东西内容B-LoRA模型的文件名写"portrait_content.safetensors"
内容权重content_lora_scale0.0-2.01.0内容的影响力大小,就像画面内容的清晰度内容B-LoRA的权重系数0.8表示轻微内容,1.2表示强烈内容

重要提醒:这个节点只能与SDXL模型一起使用,而且不能和普通的LoRA同时使用。

4. 使用技巧和建议

4.1 新手入门建议

  1. 从简单开始:先用Text2ImgStableDiffusionPipeline + GenerateTxt2Image的组合,这是最基础的文字生成图片功能
  2. 参数调试:开始时用默认参数,然后一个一个地调整,看看效果变化
  3. 种子固定:找到满意的效果后,记录下种子数值,这样能重复生成相似的图片

4.2 显卡性能优化

  • 如果你的显卡显存小于8GB,记得开启"低显存模式"
  • 图片尺寸从512x512开始,显卡够强再调高
  • 推理步数从20步开始测试,效果好再增加到50步

4.3 提示词技巧

  • 正面描述要详细具体,比如"a cute orange cat sitting on a wooden table, sunlight, high quality"
  • 负面描述要包含常见的不好效果,比如"blurry, ugly, bad quality, distorted"
  • 引导强度7.5是个好的起点,太高可能过度拟合,太低可能不够准确

4.4 路径填写注意事项

  • 写路径时要把引号删掉,比如写成:C:/images/my_photo.jpg
  • 路径中的反斜杠要改成正斜杠
  • 确保文件确实存在于指定位置

5. 常见问题解答

Q1:为什么我的节点找不到?

答:可能是安装没成功,重新在ComfyUI管理器里搜索"Diffusers in Comfy UI"再安装一次,然后重启ComfyUI。

Q2:为什么生成图片很慢?

答:可能是显卡性能不够,试试开启"低显存模式",或者减少推理步数到20步,降低图片尺寸到512x512。

Q3:为什么生成的图片质量不好?

答:检查以下几点:

  • 正面描述是否够详细
  • 负面描述是否包含了"blurry, bad quality"
  • 引导强度是否在7.5左右
  • 推理步数是否至少20步

Q4:路径填写总是出错怎么办?

答:常见问题:

  • 删除路径两边的引号
  • 把反斜杠()改成正斜杠(/)
  • 确保文件路径正确,文件确实存在
标签: #插件 2338
相关文章

ComfyUI错误修复插件详解:轻松解决常见问题 2025-07-10 18:25

ComfyUI-CustomMenu插件使用教程:高效自定义工作流指南 2025-07-10 17:50

ComfyUI图像合并插件comfyui-merge使用教程 2025-07-03 22:44

ComfyUI 图像合并插件教程 (comfyui-merge) 1. 插件简介 这是一个专门用来合并图片的 ComfyUI 插件,就像用 PS 把多张图片叠在一起那样。它的特别之处在于你精确控制每张图片的混合方式。 GitHub 地址:https://github.com/LingSss9/com

ComfyUI WAN 2.2视频插件教程:万相AI提示词全攻略 2025-07-31 11:47

ComfyUI WAN 2.2视频插件教程:万相AI提示词实战指南 2025-07-29 20:10

ComfyUI HeyGem数字人插件教程:零基础快速精通指南 2025-07-22 14:10

目录

从节点基础到高阶工作流,我们为你绘制最清晰的 ComfyUI 学习路径。告别困惑,让每一次连接都充满创造的魔力,轻松驾驭 AI 艺术的无限可能。

  • 微信
  • B站
  • GitHub
Copyright © 2025 AIX All Rights Reserved. Powered by AIX.
隐私政策
津ICP备2024019312号