【亲测免费】 Comfyui_CXH_joy_caption 使用教程

1. 项目介绍

Comfyui_CXH_joy_caption 是一个基于 ComfyUI 的开源项目，该项目整合了 Joy_caption、MiniCPMv2_6-prompt-generator 和 Florence-2 等模型，主要用于图像分类和自动标注。通过该项目，用户可以方便地实现批量图片的处理，提高工作效率。

2. 项目快速启动

环境准备

确保你的环境中已安装 Python（建议使用 Python 3.7 及以上版本），并安装以下依赖：

pip install -r requirements.txt

注意：transformers 版本不能太低。

模型安装

1. Joy_caption 模型：

   • 手动下载模型文件，放入 models/Joy_caption_alpha 文件夹下。

   • 下载链接：Joy_caption_alpha

2. MiniCPMv2_6-prompt-generator 和 CogFlorence 模型：

   • 运行以下命令，下载并安装模型：

     flux1-dev-Q8_0.gguf
     

运行项目

运行以下命令，启动项目：

python main.py

3. 应用案例和最佳实践

以下是一些应用案例和最佳实践：

• 图像分类：通过 Joy_caption 模型对图片进行分类，实现快速标注。

• 自动标注：利用 MiniCPMv2_6-prompt-generator 和 Florence-2 模型，自动为图片生成标注信息。

• 案例速度对比：florence2 < min2.6 < joy

4. 典型生态项目

• ComfyUI：一款强大的图像处理工具，支持多种图像处理功能。

• Joy_caption：一个基于深度学习的图像分类模型。

• MiniCPMv2_6-prompt-generator：一个用于生成图像标注信息的模型。

• Florence-2：一个基于 GAN 的图像生成模型。