ELD 项目使用教程

1. 项目介绍

ELD（Extreme Low-light Denoising）项目是一个基于物理噪声建模的极端低光摄影去噪项目，由Vandermode开发。该项目在CVPR 2020上进行了口头报告，并在TPAMI 2021上发表了相关论文。ELD项目的主要目标是提供一个高度准确的噪声形成模型，基于CMOS图像传感器的特性，从而能够合成更符合图像形成物理过程的真实样本。

项目的主要特点包括：

• 提供了一个新的极端低光去噪（ELD）数据集，涵盖了四个代表性的现代相机设备。
• 通过仅使用合成数据训练卷积神经网络，展示了在极端低光设置下，网络可以与使用配对真实数据训练的网络竞争，甚至有时表现更好。
• 提供了预训练模型和数据集，以促进未来的研究。

2. 项目快速启动

环境准备

• Python >= 3.6
• PyTorch >= 1.6
• 其他依赖：opencv-python, tensorboardX, lmdb, rawpy, torchinterp1d
• 平台：Ubuntu 16.04, cuda-10.1

安装步骤

1. 克隆项目仓库：

   git clone https://github.com/Vandermode/ELD.git
   cd ELD
   

2. 安装依赖：

   pip install -r requirements.txt
   

3. 编译和安装自定义的rawpy库（如果需要）：

   cd path/to/customized_rawpy
   pip install -e .
   

快速启动

1. 下载预训练模型和数据集（参考项目README中的链接）。

2. 运行测试脚本以验证安装：

   bash scripts/test_SID.sh
   bash scripts/test_ELD.sh
   

3. 训练模型（可选）：

   bash scripts/train.sh
   

3. 应用案例和最佳实践

应用案例

ELD项目可以应用于以下场景：

• 低光摄影：在极端低光环境下拍摄的照片通常包含大量噪声，ELD项目可以帮助去除这些噪声，提高图像质量。
• 医学成像：在某些医学成像技术中，图像可能在低光条件下获取，ELD项目可以用于提高这些图像的清晰度。

最佳实践

• 数据准备：在使用ELD项目进行训练或测试之前，确保数据集已经正确准备，并且符合项目的要求。
• 模型选择：根据具体的应用场景选择合适的预训练模型，或者根据需要训练新的模型。
• 参数调整：在训练过程中，根据实际情况调整超参数，以获得最佳的去噪效果。

4. 典型生态项目

相关项目

• SID（Sony Imaging Dataset）：SID数据集是ELD项目的一个重要组成部分，提供了用于训练和测试的配对数据。
• LibRaw：一个开源的RAW图像处理库，ELD项目依赖于LibRaw进行图像处理。

生态系统

ELD项目与以下生态系统项目紧密相关：

• PyTorch：ELD项目使用PyTorch作为深度学习框架，提供了强大的模型训练和推理能力。
• TensorBoardX：用于训练过程中的可视化，帮助开发者监控训练进度和模型性能。

通过这些生态项目的支持，ELD项目能够提供一个完整的解决方案，从数据准备到模型训练和应用。