Paints-UNDO项目安装与配置指南

1. 项目基础介绍

Paints-UNDO是一个开源项目，旨在提供人类绘画行为的基础模型，帮助未来的AI模型更好地满足人类艺术家的真实需求。该项目通过输入一张图像，输出该图像的绘制序列，展现了包括草图、勾线、上色、阴影处理、左右翻转、色彩曲线调整、图层可见性更改以及绘制过程中整体构思改变等多种人类绘画行为。

该项目主要使用Python编程语言。

2. 项目使用的关键技术和框架

• 模型架构：该项目使用了修改后的SD1.5架构，以及VideoCrafter家族的继续训练模型。
• VAE：使用了从ToonCrafter中提取的动画VAE。
• 3D-UNet：修改自Crafters的lvdm，支持时间窗口在空间自注意力层。
• CLIP：使用了SD2.1的CLIP模型。
• CLIP-Vision：实现了支持任意宽高比的Clip Vision (ViT/H)。

3. 项目安装和配置的准备工作

在开始安装前，请确保您的系统中已经安装了以下环境和依赖：

• Python 3.10
• Conda
• xformers
• Git

详细安装步骤

1. 克隆项目仓库：

   打开命令行，执行以下命令克隆项目仓库：

   git clone https://github.com/lllyasviel/Paints-UNDO.git
   

2. 创建并激活虚拟环境：

   使用conda创建一个名为paints_undo的新虚拟环境，并激活它：

   conda create -n paints_undo python=3.10
   conda activate paints_undo
   

3. 安装依赖：

   在激活的虚拟环境中，执行以下命令安装所需的依赖：

   pip install xformers
   pip install -r requirements.txt
   

4. 运行项目：

   在项目目录中，运行以下命令启动应用：

   python gradio_app.py
   

完成以上步骤后，项目应该就可以正常运行了。如果遇到任何问题，请检查您的环境配置是否正确，或者查阅项目的官方文档以获取更多帮助。