IllumiNeRF：无需逆渲染，3D场景任意光照效果重现

目前，神经辐射场技术在逼真地渲染和重建复杂场景方面取得了显著进展，例如著名的“神经渲染的3D网格”技术。

然而，当光照条件发生变化时，要准确捕捉真实世界物体的外观，仍然面临着挑战，并且需要大量的计算资源。

最近，苏黎世联邦理工学院的研究人员推出了一项创新技术：IllumiNeRF，它通过学习场景的光照表示，从而能够在各种光照条件下对物体进行渲染，该技术扩展了神经辐射场（NeRF）的能力，使其能够模拟复杂光照条件下的物体外观。

论文核心内容：

图示：（a）为单个场景几何体和材质，神经辐射场从中重建3D场景，（b）为结果；

在不同视角和（c）不同光照下的场景渲染，其中使用该方法的光照效果进行合成重建，（d）为结果；

总之，使用（e）多张不同光照下的图片进行训练以及(f)在特定视图下的光照强度S与其预测颜色的梯度之间的关系；

最后，通过NeRF重建并渲染出复杂光照的场景，见（g）和（h）。

三维一致的神经渲染。

第一行展示了在NeRF的固定几何体中的光照传输。

第二行展示了学习视角相关的辐射传输的复杂漫反射材质。

这项技术可能会显著改善虚拟现实、增强现实以及其他需要逼真渲染的应用。例如，在电商领域中，可以用来更真实地展示商品，从而提升购物体验和满意度。此外，该技术还有潜力在电影制作、游戏开发以及其他创意产业中得到广泛应用，因为它能够模拟真实的光照效果，并简化了内容创作流程。总而言之，这项技术有望推动各个领域的技术创新和商业应用，因为它能够更高效地创建逼真的三维场景和体验。

项目地址：https://top.aibase.com/tool/illuminerf