推荐使用:EMLight - 球形分布近似照明估算(AAAI 2021)
2024-06-07 13:36:30作者:温艾琴Wonderful

项目简介
EMLight 是一款先进的照明估算工具,其设计思路基于球形分布近似,能够在复杂室内环境中精确估计空间光分布。这个项目源自 AAAI 2021 年的论文,并且持续更新,最新引入了 Needlets 基础,使得照明表示在空间和频率域中都成为可能。
技术分析
EMLight 使用深度学习方法训练一个回归网络,该网络能够从输入的局部高动态范围(HDR)图像中恢复环境光照。它创新性地应用了分布近似策略来处理全局光照,结合最新的 Needlets 基础,大大提高了照明估算的准确性和鲁棒性。此外,模型训练采用了逐渐增加数据量的方式,以促进稳定的学习过程。
应用场景
EMLight 可广泛应用于室内场景的虚拟对象插入与渲染,例如将新物体无缝地放置在已拍摄的图像中,保持光照的一致性。其虚拟对象重光照(VOR)数据集包含了各种室内和室外背景,可用于评估照明估算的性能。
项目特点
- 创新的照明表示:通过球形分布近似实现对复杂光环境的有效建模。
- Needelets 基础:允许在空间和频域中表示光照,提供更精细的控制和更高的精度。
- 逐步训练策略:简化训练过程,防止模型过拟合或训练不稳定性。
- 虚拟对象重光照:提供了一个专门的数据集用于验证和展示照明估算效果,提升了合成图像的真实感。
- 兼容性强大:支持 Linux 和 macOS 操作系统,需要 Python3、PyTorch 以及 NVIDIA GPU/CUDA CuDNN(CPU 也可运行)。
为了进一步了解并利用 EMLight 实现高质量的光照估算,只需准备相应的数据集,按照项目中的步骤进行预处理、下载预训练模型并启动训练即可。如果你在相关领域工作或者研究,那么 EMLight 绝对是你不容错过的工具。
记得在使用 EMLight 进行研究时引用相关的学术论文哦!
@inproceedings{zhan2021emlight,
title={EMLight: Lighting Estimation via Spherical Distribution Approximation},
author={Zhan, Fangneng and Zhang, Changgong and Yu, Yingchen and Chang, Yuan and Lu, Shijian and Ma, Feiying and Xie, Xuansong},
booktitle={Proceedings of the AAAI Conference on Artificial Intelligence},
year={2021}
}
@article{zhan2022gmlight,
title={Gmlight: Lighting estimation via geometric distribution approximation},
author={Zhan, Fangneng and Yu, Yingchen and Zhang, Changgong and Wu, Rongliang and Hu, Wenbo and Lu, Shijian and Ma, Feiying and Xie, Xuansong and Shao, Ling},
journal={IEEE Transactions on Image Processing},
volume={31},
pages={2268--2278},
year={2022},
publisher={IEEE}
}
登录后查看全文
热门项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0439
源启盛夏_AtomGit暑期开发者成长计划「源启盛夏」暑期校园开发者成长计划旨在激活校园开源力量,通过积分激励、认证扶持、资源倾斜等形式,引导高校组织和开发者完成「入驻 — 建项目 — 做贡献 — 获认证 — 得资源」的完整闭环。无论你是想带领社团入驻平台的组织者,还是希望用代码贡献证明自己的开发者,都能在这里找到属于你的成长路径。Markdown00
jiuwenswarmJiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。Python0753
Hy3Hy3 是由腾讯混元团队研发的快慢思考融合的混合专家模型,总参数量 295B,激活参数 21B,MTP 层参数 3.8B。4 月底发布 Hy3 Preview 后,我们在 50 多个业务中获得了广泛的反馈,修复了各种体验问题,进一步提升了后训练的质量和规模。今天,我们发布 Hy3。它展现出显著强于同尺寸并比肩旗舰(参数规模往往是 Hy3 的 2~5 倍)开源模型的智能水平,显著提升了在各类产品和生产力任务中的实用价值。Python00
AscendNPU-IRAscendNPU-IR是基于MLIR(Multi-Level Intermediate Representation)构建的,面向昇腾亲和算子编译时使用的中间表示,提供昇腾完备表达能力,通过编译优化提升昇腾AI处理器计算效率,支持通过生态框架使能昇腾AI处理器与深度调优C++0306
PPTistPowerPoint-ist(/'pauəpɔintist/),一个基于 Web 的在线演示文稿(幻灯片)应用,还原了大部分 Office PowerPoint 常用功能。可以在 Web 浏览器中编辑/演示幻灯片,支持AIPPT。商用请遵守AGPL-3协议或购买授权。Vue00
项目优选
收起
暂无描述
Markdown
824
5.46 K
Ascend Extension for PyTorch
Python
796
1.12 K
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
492
513
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
961
2.26 K
deepin linux kernel
C
32
16
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
777
1.56 K
AscendNPU-IR是基于MLIR(Multi-Level Intermediate Representation)构建的,面向昇腾亲和算子编译时使用的中间表示,提供昇腾完备表达能力,通过编译优化提升昇腾AI处理器计算效率,支持通过生态框架使能昇腾AI处理器与深度调优
C++
446
306
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.2 K
1.24 K
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.86 K
753
CANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。
Jupyter Notebook
637
260