论文精选

PIXLRelight:基于内在条件控制的单图重光照方法

PIXLRelight: Controllable Relighting via Intrinsic Conditioning

精选理由

做图像编辑、3D 重建或影视后期的人终于有了一个又快又可控的重光照工具——PIXLRelight 在 0.1 秒内实现物理级光照控制,比传统方法省去大量优化时间,建议直接试玩开源代码。

AI 摘要

PIXLRelight 提出了一种前馈式单图像重光照方法,通过共享的内在条件(反照率、漫反射阴影和非漫反射残差)桥接物理渲染与学习图像合成。训练时从多光照照片分解出条件,推理时从用户指定 PBR 光源下的粗 3D 重建渲染中计算相同条件,再由基于 Transformer 的神经渲染器应用目标光照。该方法支持任意 PBR 风格的光照控制,重光照质量达到最先进水平,且每张图像处理时间不到 0.1 秒。代码和模型已开源。

AI 翻译 · 中文

PIXLRelight 提出了一种前馈式单图像重光照方法,通过共享的内在条件(反照率、漫反射阴影和非漫反射残差)桥接物理渲染与学习图像合成。训练时从多光照照片分解出条件,推理时从用户指定 PBR 光源下的粗 3D 重建渲染中计算相同条件,再由基于 Transformer 的神经渲染器应用目标光照。该方法支持任意 PBR 风格的光照控制,重光照质量达到最先进水平,且每张图像处理时间不到 0.1 秒。代码和模型已开源。

arXiv cs.LGWe present PIXLRelight, a feed-forward approach for physically controllable single-image relighting. Existing methods either provide limited lighting control (e.g. through text or environment maps), accumulate errors whe