Mirror-3DGS: Incorporating Mirror Reflections into 3D Gaussian Splatting

3D高斯喷洒（3DGS）在三维场景重建和新视角合成领域取得了重大突破。然而，3DGS，就像其前身神经辐射场（NeRF）一样，难以准确地模拟物理反射，特别是在现实场景中无处不在的镜子中。这个疏忽错误地将反射视为实际存在的分离实体，导致重建不准确，并且在不同视角下反射特性不一致。为了解决这个关键挑战，我们引入了Mirror-3DGS，这是一个创新的渲染框架，旨在掌握镜子几何和反射的复杂性，为生成逼真的镜面反射铺平道路。通过巧妙地将镜子属性纳入3DGS并利用平面镜像原理，Mirror-3DGS构建了一个镜面视角，从镜子后面观察，增强了场景渲染的逼真度。广泛的评估，涵盖了合成和现实场景，展示了我们的方法能够实时渲染具有增强保真度的新视角，尤其是在具有挑战性的镜面区域，超越了最先进的Mirror-NeRF。我们的代码将公开可用以进行可重复研究。

Mirror-3DGS试图解决3DGS和NeRF无法准确建模物理反射的问题，特别是在镜子等反射面上。这是否是一个新问题？

Mirror-3DGS通过将镜面属性纳入3DGS并利用平面镜像原理，创造了一个从镜子后面观察的镜像视角，从而提高了场景渲染的逼真度。

论文通过广泛的评估，展示了Mirror-3DGS在合成和真实场景中渲染新视角的能力，实时性能超过了目前最先进的Mirror-NeRF，特别是在具有挑战性的反射区域。论文的代码将公开发布以进行可重复性研究。

最近的相关研究包括NeRF和Mirror-NeRF。