从文本到图像：ComfyUI-IF_AI_tools提示词生成模型（Llama3/Phi3）实战案例

【免费下载链接】ComfyUI-IF_AI_tools ComfyUI-IF_AI_tools is a set of custom nodes for ComfyUI that allows you to generate prompts using a local Large Language Model (LLM) via Ollama. This tool enables you to enhance your image generation workflow by leveraging the power of language models. 项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI-IF_AI_tools

ComfyUI-IF_AI_tools是一套强大的ComfyUI自定义节点，支持通过Ollama调用本地大语言模型（如Llama3和Phi3）生成图像提示词，无缝增强你的AI绘画工作流。本文将带你快速掌握这一工具的安装配置与实战应用，让文本灵感轻松转化为视觉艺术。

🌟 为什么选择ComfyUI-IF_AI_tools？

这款工具的核心优势在于本地化部署与模型多样性：

• 支持Llama3、Phi3等主流开源模型，无需依赖云端API
• 内置专门优化的提示词生成模型：impactframes/llama3_ifai_sd_prompt_mkr_q4km和impactframes/ifai_promptmkr_dolphin_phi3
• 与ComfyUI深度集成，可直接嵌入现有图像生成工作流
• 提供OCR-RAG、nanoGraphRAG等高级功能，实现智能内容分析与提示词扩展

📋 前期准备与安装步骤

1️⃣ 安装必要依赖

为确保PDF处理等功能正常运行，需先安装Poppler工具：

Windows用户（使用PowerShell）：

# 安装scoop包管理器
iwr -useb get.scoop.sh | iex
# 安装poppler
scoop install poppler

Debian/Ubuntu用户：

sudo apt-get install poppler-utils

MacOS用户：

brew install poppler

验证安装：

pdftotext -v

2️⃣ 安装Ollama与模型

推荐使用Ollama管理本地模型：

1. 访问ollama.com下载安装Ollama
2. 安装提示词生成模型：

# Llama3专用模型
ollama run impactframes/llama3_ifai_sd_prompt_mkr_q4km:latest
# Phi3轻量模型
ollama run impactframes/ifai_promptmkr_dolphin_phi3:latest

3️⃣ 安装ComfyUI节点

方法一：通过ComfyUI管理器

1. 打开ComfyUI管理器
2. 搜索"IF_AI_tools"并安装

方法二：手动安装

# 克隆仓库
git clone https://gitcode.com/gh_mirrors/co/ComfyUI-IF_AI_tools
# 安装依赖
cd ComfyUI-IF_AI_tools
python -m pip install -r requirements.txt

🚀 核心功能与使用流程

🔑 关键节点介绍

ComfyUI-IF_AI_tools提供多个专用节点，其中最核心的包括：

• IFImagePromptNode：基于图像内容生成提示词，支持自动模式
• IFChatPromptNode：切换SD提示词生成与标准聊天模式
• IFPromptMkrNode：专用提示词生成节点（已迁移至PromptImaGen）

📝 基础使用步骤

1. 启动ComfyUI并在节点面板中找到IF_AI_tools分类
2. 添加IFImagePromptNode到工作流
3. 配置模型参数：
   • 选择Ollama作为后端
   • 指定模型名称（如llama3_ifai_sd_prompt_mkr_q4km）
   • 启用"Auto"模式自动生成提示词
4. 连接到图像生成节点（如Stable Diffusion）
5. 运行工作流，查看AI生成的提示词效果

💡 提示词优化技巧

• 使用**IF_AI/presets/wildcards/**目录下的预设文件扩展词汇
• 结合IFJoinTextNode组合多个提示词片段
• 调整温度参数控制生成多样性（推荐0.7-0.9）
• 使用负面提示词（来自IF_AI/presets/neg_prompts.json）提升图像质量

🎨 实战案例：从文本到图像的全过程

案例：生成"古老巨型建筑下的孤独身影"

1. 输入基础文本：ancient Megastructure, small lone figure

2. 模型处理：Llama3提示词生成模型扩展为：

'A dwarfed figure standing atop an ancient megastructure, worn stone towering overhead. Underneath the dim moonlight, intricate engravings adorn the crumbling walls. Overwhelmed by the sheer size and age of the structure, the small figure appears lost amidst the weathered stone behemoth.'

3. 图像生成：结合Stable Diffusion生成的效果展示（实际使用时会显示本地生成图像）

⚙️ 高级配置与扩展

环境变量设置

如需使用API服务（如OpenAI、Anthropic），可设置环境变量：

# Linux/MacOS
export OPENAI_API_KEY="your_key_here"
# Windows
setx OPENAI_API_KEY "your_key_here"

自定义预设

编辑IF_AI/presets/assistants.json和IF_AI/presets/profiles.json创建个性化提示词模板，实现特定风格的提示词生成。

❗ 注意事项

• 该项目已归档，提示词生成功能已迁移至ComfyUI-IF_AI_PromptImaGen
• 使用前需卸载或禁用原仓库以避免冲突
• 部分高级功能（如Supervision Object Detection）需要额外模型支持

📚 资源与支持

• 工作流示例：workflows/IF_AI_tools.json
• 预设文件：IF_AI/presets/
• 模型下载：HuggingFace impactframes

通过ComfyUI-IF_AI_tools，即使是新手也能快速掌握AI提示词生成的精髓，让你的创意通过Llama3/Phi3等强大模型转化为令人惊艳的视觉作品。立即尝试，开启你的AI绘画增强之旅吧！

【免费下载链接】ComfyUI-IF_AI_tools ComfyUI-IF_AI_tools is a set of custom nodes for ComfyUI that allows you to generate prompts using a local Large Language Model (LLM) via Ollama. This tool enables you to enhance your image generation workflow by leveraging the power of language models. 项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI-IF_AI_tools