D-MiSo: Editing Dynamic 3D Scenes using Multi-Gaussians Soup

在过去的几年中，我们观察到了许多用高斯喷洒（GS）建模动态三维场景的方法。这些解决方案使用GS来表示场景的结构，使用神经网络来建模动态。这些方法允许快速渲染和提取动态场景中的每个元素。然而，随着时间的推移修改这些对象是具有挑战性的。SC-GS（带有变形控制点的稀疏高斯喷洒）部分解决了这个问题。然而，这种方法需要选择需要保持固定的元素以及需要在编辑过程中调整的质心。此外，这项任务还涉及到编辑的再现性方面的额外困难。为了解决这个问题，我们提出了动态多高斯汤（D-MiSo），它允许我们建模动态GS的网格启发式表示。此外，我们提出了一个策略，将参数化高斯喷洒链接起来，形成一个估计网格的三角形汤。因此，我们可以单独构建组成场景的三维对象的新轨迹。因此，我们可以使场景的动态在时间上可编辑，或者在保持部分动态的同时进行编辑。

本论文旨在解决使用高斯喷洒（GS）建模动态三维场景时修改对象的困难性问题，并提出了一种新的动态多高斯汤（D-MiSo）模型来实现场景的动态可编辑性。

D-MiSo模型使用三角形网格结构和参数化高斯喷洒相结合的方式，使得可以对场景中的三维对象单独构建新的轨迹，从而实现场景的动态可编辑性。

论文提出的D-MiSo模型不需要选择需要固定的元素，也不需要调整中心点，相比于之前的方法具有更好的可编辑性。实验结果表明，D-MiSo模型的可编辑性和渲染速度都优于之前的方法。论文使用了公开数据集，并提供了开源代码。

相关研究包括使用高斯喷洒建模动态场景的方法，如SC-GS，以及使用三角形网格结构和参数化高斯喷洒相结合的方法，如GaussTSDF和DeepSDF。