ComfyUI-OllamaGemini 插件完全教程

1. 插件简介

插件地址： https://github.com/al-swaiti/ComfyUI-OllamaGemini

这个插件就像是给你的 ComfyUI 装上了一个超级大脑！它能让你的 ComfyUI 连接到各种聪明的人工智能服务，就像给你的图像处理工具箱里加了一堆智能助手。

这个插件能给我们带来什么效果？

1. 智能对话助手 - 就像有个专业摄影师在旁边指导你，帮你写出更好的图片描述
2. 自动生成图片 - 直接用文字描述就能生成图片，不需要复杂的节点连接
3. 智能抠图 - 自动去除图片背景，比美图秀秀还厉害
4. 图片转矢量图 - 把普通图片变成可以无限放大不失真的矢量图
5. 智能提示词生成 - 自动帮你写出专业的图片生成提示词
6. 多种尺寸预设 - 一键选择各种常用的图片尺寸

插件包含节点总数： 约35个节点

2. 如何安装

方法一：通过 ComfyUI Manager 安装（推荐）

1. 确保你已经安装了 ComfyUI Manager
2. 在 ComfyUI 界面中，点击 Manager 标签
3. 搜索 "OllamaGemini"
4. 点击安装按钮
5. 重启 ComfyUI

方法二：手动安装

1. 打开终端或命令提示符
2. 进入你的 ComfyUI 安装目录下的 custom_nodes 文件夹
3. 运行命令：

   git clone https://github.com/al-swaiti/ComfyUI-OllamaGemini.git
   

4. 安装依赖包：

   pip install google-genai google-generativeai openai>=1.3.0 anthropic>=0.8.0 requests>=2.31.0 vtracer>=0.6.0 dashscope>=1.13.6 Pillow>=10.0.0 scipy>=1.10.0 opencv-python transformers>=4.30.0 torch torchaudio
   

5. 重启 ComfyUI

API 密钥配置

安装完成后，你需要配置各种 AI 服务的密钥。插件会自动创建一个 config.json 文件，你需要填入相应的 API 密钥：

• Google Gemini: 免费，到 https://makersuite.google.com/app/apikey 获取
• OpenAI: 付费，到 https://platform.openai.com/api-keys 获取
• Claude: 有限免费，到 https://console.anthropic.com/ 获取
• Ollama: 完全免费，本地运行，到 https://ollama.com/ 下载

3. 节点详细解析

3.1 Gemini API 节点 - 谷歌智能助手

这个节点就像是请了一个谷歌的人工智能专家来帮你，它能看图片、听音频、看视频，然后用文字回答你的问题。

参数详解

3.2 Ollama API 节点 - 本地智能助手

这个节点就像在你自己电脑上养了一个AI宠物，不需要联网，完全免费使用。它能处理文字、图片、视频和音频。

参数详解

3.3 OpenAI API 节点 - ChatGPT智能助手

这个节点就是大名鼎鼎的ChatGPT，是目前最聪明的AI之一，但需要付费使用。

参数详解

3.4 Claude API 节点 - 人类化AI助手

Claude是另一个非常聪明的AI，特别擅长理解人类的意图，回答更像人类。

参数详解

3.5 Qwen API 节点 - 阿里巴巴智能助手

这是阿里巴巴开发的AI助手，特别擅长处理中文，对中国文化理解更深。

参数详解

3.6 Gemini Image Generator 节点 - 谷歌图像生成器

这个节点就像有个专业画家，你用文字描述想要的图片，它就能直接画出来给你。

参数详解

3.7 Smart Prompt Generator 节点 - 智能提示词生成器

这个节点就像有个专业的提示词写手，能自动帮你写出各种风格的专业提示词。

参数详解

3.8 BRIA RMBG 节点 - 智能背景移除器

这个节点就像一个超级精准的橡皮擦，能自动识别并去除图片背景，比手动抠图快100倍。

参数详解

3.9 CLIPSeg 节点 - 智能分割器

这个节点就像有个能听懂人话的魔法剪刀，你说要剪什么，它就能精准地把那部分剪出来。

参数详解

3.10 Combine Seg Masks 节点 - 分割遮罩合并器

这个节点就像胶水，能把两个分割出来的区域粘合在一起。

参数详解

3.11 Convert Raster to Vector 节点 - 图片转矢量图

这个节点就像把普通照片变成可以无限放大的魔法图片，放大多少倍都不会模糊。

参数详解

3.12 Save SVG 节点 - SVG文件保存器

这个节点就像一个专门保存矢量图的文件管家，还能生成预览图让你看效果。

参数详解

3.13 SVG Preview 节点 - SVG预览器

这个节点就像一个SVG文件的放大镜，让你能看到矢量图的效果。

参数详解

3.14 FLUX Resolutions 节点 - 图片尺寸选择器

这个节点就像一个尺寸工具箱，里面有各种常用的图片尺寸，还能自定义。

参数详解

3.15 ComfyUI Styler 节点 - 风格样式器

这个节点就像一个巨大的风格调色板，有数百种艺术风格可以选择和混合。

参数详解

3.16 Text Splitter 节点 - 文本分割器

这个节点就像一把智能剪刀，能按照你指定的符号把长文本切成小段。

参数详解

3.17 Save Text 节点 - 文本保存器

这个节点就像一个文本文件管家，能把AI生成的文字保存成文件。

参数详解

3.18 List Available Models 节点 - 可用模型列表

这个节点就像一个模型目录，能显示你可以使用的所有AI模型。

参数详解

4. 使用技巧和建议

4.1 新手入门建议

1. 从简单开始：先试试基本的文本对话功能，熟悉各个AI的特点
2. API密钥管理：建议先申请免费的Gemini密钥开始体验
3. 提示词技巧：开始时用简单明确的描述，逐渐学习更复杂的提示词
4. 节点连接：按照"输入→处理→输出"的逻辑连接节点

4.2 进阶使用技巧

1. 组合使用：可以用一个AI生成提示词，再用另一个AI生成图片
2. 风格混合：Smart Prompt Generator能自动混合多种风格
3. 批量处理：Text Splitter配合其他节点可以批量处理多个提示词
4. 质量优化：使用结构化输出功能让AI按照特定格式回答

4.3 性能优化建议

1. 模型选择：日常使用选择快速模型，重要任务选择高质量模型
2. 参数调节：temperature低一点结果更稳定，高一点更有创意
3. 本地优先：有条件的话优先使用Ollama本地模型，免费且隐私
4. 缓存利用：Ollama的keep_alive参数能避免重复加载模型

5. 常见问题解答

5.1 安装和配置问题

Q: 安装后找不到节点怎么办？
A: 重启ComfyUI，确保插件文件夹在custom_nodes目录下，检查是否有错误信息。

Q: API密钥配置后还是报错？
A: 检查config.json文件是否正确生成，密钥是否有效，网络是否能访问对应服务。

Q: Ollama连接失败？
A: 确保Ollama服务正在运行，检查端口是否为11434，防火墙是否阻止。

5.2 使用问题

Q: AI回答质量不好怎么办？
A: 尝试更详细的提示词，调整temperature参数，或者换用更强的模型。

Q: 图片生成失败？
A: 检查提示词是否合适，避免敏感内容，确保API额度充足。

Q: SVG转换效果不好？
A: 调整vtracer参数，特别是color_precision和corner_threshold。

5.3 性能问题

Q: 处理速度很慢？
A: 选择更快的模型，减少max_tokens，使用本地Ollama模型。

Q: 内存占用太高？
A: 降低Ollama的keep_alive时间，关闭不用的模型。

6. 总结

这个ComfyUI-OllamaGemini插件就像给你的ComfyUI装上了一个AI大脑，让原本只能处理图片的工具变成了一个全能的AI工作站。无论你是想要智能对话、自动生成图片、专业抠图，还是创建矢量图，这个插件都能帮你轻松搞定。

记住，AI工具就像画笔，关键在于如何使用。多实践、多尝试，你会发现这个插件能大大提升你的创作效率！