MagicQuill 使用与启动教程

1. 项目介绍

MagicQuill 是一个智能交互式图像编辑系统，旨在实现精确的图像编辑。它拥有用户友好的界面、AI驱动的建议以及精确的局部编辑功能。该项目由香港科技大学和蚂蚁集团等机构的研究人员共同开发。

2. 项目快速启动

环境搭建

• 克隆项目仓库：

  git clone --recursive https://github.com/ant-research/MagicQuill.git
  cd MagicQuill
  

• 下载并解压预训练模型：

  wget -O models.zip "模型下载链接"
  unzip models.zip
  

  注意：将“模型下载链接”替换为实际模型文件的下载链接。

• 创建虚拟环境并安装依赖：

  conda create -n MagicQuill python=3.10 -y
  conda activate MagicQuill
  pip install torch==2.1.2 torchvision==0.16.2 torchaudio==2.1.2 --index-url https://download.pytorch.org/whl/cu118
  pip install gradio_magicquill-0.0.1-py3-none-any.whl
  pip install -e MagicQuill/LLaVA/
  pip install -r requirements.txt
  

• 运行 MagicQuill：

  python gradio_run.py
  

Docker 容器启动

• 克隆项目仓库并下载模型：

  git clone --recursive https://github.com/ant-research/MagicQuill.git
  cd MagicQuill
  wget -O models.zip "模型下载链接"
  unzip models.zip
  

• 构建并运行 Docker 容器：

  docker compose build
  docker compose up -d
  

3. 应用案例和最佳实践

三种魔法羽毛笔的使用

• 添加画笔：根据提示添加细节和元素，以自由活泼的笔触表达你的想法。
• 减去画笔：根据提示移除多余的细节或重绘区域。
• 颜色画笔：精确地给图像上色，匹配画笔的颜色。

绘画和猜测

• 使用画笔绘制时，系统会智能猜测你想要创建的内容，并自动填充提示。如果系统猜测错误，你可以告诉它你实际想要绘制的内容。

4. 典型生态项目

• MagicQuill 在 Modelscope 平台也可用。
• ComfyUI MagicQuill 定制节点已发布，可以在相应的仓库中找到详细信息。

以上是 MagicQuill 的基本介绍和启动教程。希望对您有所帮助！