ComfyUI-Ollama 插件完整教程

插件简介

插件地址： https://github.com/stavsap/comfyui-ollama

这个插件就像给你的 ComfyUI 装上了一个超级聪明的本地 AI 助手！它能让你：

• 和本地运行的 AI 模型聊天对话（就像和朋友聊天一样，但这个朋友超级博学）
• 让 AI 看图说话，描述图片内容（就像有个专业解说员）
• 用中文或任何语言和 AI 交流（不用担心语言障碍）
• 完全在本地运行，保护你的隐私（不用担心数据泄露）
• 支持各种开源 AI 模型（免费使用各种强大的 AI）

简单来说，这就是一个让你在 ComfyUI 里直接使用本地 AI 大模型的神器，完全免费且保护隐私！

如何安装

1. 首先需要安装 Ollama（本地 AI 运行环境）
   • 访问 https://ollama.ai 下载安装
   • 安装后运行 ollama pull llama2 下载一个模型
2. 打开你的 ComfyUI 文件夹
3. 进入 custom_nodes 文件夹
4. 用 git 下载：git clone https://github.com/stavsap/comfyui-ollama.git
5. 安装依赖：在插件文件夹里运行 pip install -r requirements.txt
6. 重启 ComfyUI

节点详细解析

3.1 Ollama Vision 节点 - AI 看图说话专家

这个节点就像一个专业的图片解说员，能看懂图片并用文字详细描述。

参数详解

3.2 Ollama Generate 节点 - AI 文本对话器

这个节点就像一个博学的聊天机器人，能回答各种问题和进行对话。

参数详解

3.3 Ollama Generate Advance 节点 - 高级 AI 对话器

这个节点是对话器的专业版，提供更多精细控制选项。

参数详解

3.4 Ollama Options V2 节点 - AI 参数配置器

这个节点就像一个专业的调音台，让你精细调节 AI 的各种行为参数。

参数详解

3.5 Ollama Connectivity V2 节点 - 连接配置器

这个节点就像一个网络设置面板，配置如何连接到 AI 服务。

参数详解

3.6 Ollama Generate V2 节点 - 新版 AI 生成器

这个节点是最新版的 AI 对话生成器，整合了所有功能并支持模块化配置。

参数详解

3.7 Ollama Save Context 节点 - 对话记录保存器

这个节点就像一个对话记录本，能把 AI 的对话历史保存到文件里。

参数详解

3.8 Ollama Load Context 节点 - 对话记录加载器

这个节点就像一个对话记录播放器，能读取之前保存的对话历史。

参数详解

3.9 前端扩展 - 智能模型选择器

这个前端扩展就像一个智能助手，能自动获取可用的 AI 模型列表并更新界面。

功能说明

使用技巧和建议

1. 新手入门路线：

   • 先用 Ollama Generate 节点熟悉基本对话
   • 然后尝试 Ollama Vision 让 AI 看图说话
   • 最后用 Generate V2 配合 Options V2 进行高级控制

2. 模型选择建议：

   • llama2: 适合一般对话和问答
   • llava: 专门用于图像理解和描述
   • codellama: 适合编程相关问题
   • mistral: 速度快，适合简单任务

3. 参数调优技巧：

   • 温度 0.1-0.3: 需要准确答案时（如数学题）
   • 温度 0.7-0.9: 需要创意内容时（如写作）
   • Top P 0.9: 平衡准确性和多样性的最佳值
   • Top K 40: 大多数情况下的最佳选择

4. 性能优化：

   • 频繁使用时设置较长的 keep_alive 时间
   • 不需要时设置较短时间释放内存
   • 使用 V2 版本节点获得更好的性能和功能

5. 上下文管理：

   • 长对话时启用 keep_context 保持连贯性
   • 定期保存重要对话记录
   • 使用 Save/Load Context 节点管理对话历史

常见问题解答

Q: 为什么连接不上 Ollama 服务？
A: 确保 Ollama 已经安装并运行，检查服务地址是否正确（默认是 http://127.0.0.1:11434）。

Q: 模型列表为空怎么办？
A: 需要先用 ollama pull 模型名 下载模型，比如 ollama pull llama2。

Q: AI 回答很慢怎么办？
A: 检查电脑配置，考虑使用更小的模型，或者调整 num_predict 参数限制回答长度。

Q: 如何让 AI 记住之前的对话？
A: 在 Generate Advance 或 Generate V2 中开启 keep_context 选项。

Q: Vision 节点看不懂图片？
A: 确保使用支持视觉的模型如 llava，普通的文本模型无法处理图片。

Q: 如何让 AI 扮演特定角色？
A: 在 system 参数中设置角色，比如"你是一个专业的摄影师"。

Q: 输出格式选择 json 但得到普通文字？
A: 在提示词中明确要求 JSON 格式，比如"请用 JSON 格式回答"。

Q: 如何控制回答的创意程度？
A: 调整 temperature 参数，0.1 很保守，1.0 很有创意。

高级应用示例

智能图片描述工作流：

1. 加载图片 → Ollama Vision
2. 设置 query 为"详细描述这张图片的内容、风格和情感"
3. 选择 llava 模型
4. 获得专业的图片分析

连续对话工作流：

1. Ollama Connectivity V2 → Ollama Generate V2
2. 开启 keep_context
3. 每次对话的 context 输出连接到下次的 context 输入
4. 实现连续对话记忆

参数化创作工作流：

1. Ollama Options V2 → Ollama Generate V2
2. 调整 temperature 和 top_p 参数
3. 设置不同的 system 角色
4. 生成不同风格的创作内容

总结

ComfyUI-Ollama 插件包含 9 个强大的节点，为用户提供了完整的本地 AI 对话和图像理解解决方案。从简单的文本生成到复杂的多模态交互，从基础对话到高级参数控制，这个插件都能满足。

插件特点：

• ✅ 完全本地运行，保护隐私
• ✅ 支持多种开源模型
• ✅ 提供图像理解能力
• ✅ 支持连续对话记忆
• ✅ 丰富的参数控制选项
• ✅ 模块化设计便于组合使用

节点分类统计：

• 基础对话类：2个（Generate、Generate Advance）
• 图像理解类：1个（Vision）
• 新版本类：3个（Generate V2、Options V2、Connectivity V2）
• 数据管理类：2个（Save Context、Load Context）
• 前端扩展类：1个（智能模型选择器）

对于想要在 ComfyUI 中使用本地 AI 大模型的用户来说，这是一个功能完整、易于使用的专业工具包。无论是简单的问答还是复杂的多模态应用，都能在这个插件中找到合适的解决方案。