来自今日的爱可可前沿推介

Multi-View Mesh Reconstruction with Neural Deferred Shading

M Worchel, R Diaz, W Hu, O Schreer, I Feldmann, P Eisert
[Fraunhofer HHI]

基于神经延迟着色的多视图网格重建

简介:
所提出的多视图网格重建方法,结合了三角网格优化的速度和神经渲染的通用性,在精度上与传统基线结果相匹配,可实现快速准确的3D表面重建。

摘要:
本文提出了一种合成分析方法,用任意材料和照明对不透明物体进行快速多视图3D重建。最先进的方法同时使用神经表面表示和神经渲染。虽然灵活,但神经表面表示是优化运行时的一个重要瓶颈。本文将表面表示为三角网格,并围绕三角光栅化和神经着色构建可微渲染管道。渲染器用于梯度下降优化,其中三角网格和神经着色器被联合优化以再现多视图图像。在公共3D重建数据集上评估了所提出方法,表明它可以匹配传统基线和神经方法的重建精度,同时在优化运行时超过它们。此外,本文研究了着色器,发现它学习了一种可解释的外观表示,支持3D材质编辑等应用。

https://arxiv.org/abs/2212.04386

图片

图片

图片

图片

内容中包含的图片若涉及版权问题,请及时与我们联系删除