Texture-GS: Disentangling the Geometry and Texture for 3D Gaussian Splatting Editing

3D高斯点光滑技术作为一种开创性的方法，因其高保真重建和实时渲染的能力而受到越来越多的关注。然而，它将场景的外观和几何结构耦合在高斯属性中，这阻碍了纹理交换等编辑操作的灵活性。为了解决这个问题，我们提出了一种新的方法，即Texture-GS，通过将外观表示为映射到三维表面上的二维纹理，从而分离外观和几何结构，从而便于外观编辑。技术上，我们提出的纹理映射模块通过一个UV映射MLP来学习3D高斯中心的UV坐标，通过MLP的局部泰勒展开来有效地近似射线-高斯交点的UV坐标，以及可学习的纹理来捕捉精细的外观，从而实现了分离。在DTU数据集上的广泛实验表明，我们的方法不仅便于高保真外观编辑，而且在消费级设备上实现了实时渲染，例如单个RTX 2080 Ti GPU。

论文提出了一种名为Texture-GS的新方法，旨在解决3D高斯光滑技术中外观和几何之间的耦合问题，从而实现外观编辑的灵活性。

Texture-GS通过将外观表示为映射到3D表面上的2D纹理来实现外观与几何的解耦，并通过纹理映射模块实现解耦，该模块包括一个UV映射MLP，一个MLP的局部Taylor展开和一个可学习的纹理。

Texture-GS不仅实现了高保真度的外观编辑，还在消费级设备上实现了实时渲染。实验使用DTU数据集进行了广泛的测试，并且论文提供了开源代码。

在相关研究中，最近的一些论文包括：《NeRF: Representing Scenes as Neural Radiance Fields for View Synthesis》和《DeepSDF: Learning Continuous Signed Distance Functions for Shape Representation》。