Toon3D: Seeing Cartoons from a New Perspective

在这项工作中，我们恢复了非几何一致场景的潜在3D结构。我们的分析重点是卡通和动漫中的手绘图像。许多卡通由没有3D渲染引擎的艺术家创建，这意味着场景的任何新图像都是手绘的。手绘图像通常是对世界的忠实表现，但只是在定性意义上，因为人类很难以一致的方式绘制物体或场景的多个视角的3D图像。尽管如此，人们仍然可以轻松地从不一致的输入中感知到3D场景！在这项工作中，我们纠正2D绘图不一致性，以恢复一个合理的3D结构，使新变形的绘图彼此一致。我们的流程包括一个用户友好的注释工具、相机姿态估计和图像变形，以恢复密集的结构。我们的方法将图像变形以遵守透视相机模型，使我们对齐的结果可以插入新视角合成重建方法中，从以前未曾绘制的视角体验卡通。我们的项目页面是https://toon3d.studio/。

本论文旨在恢复非几何一致场景的潜在3D结构，特别是手绘卡通和动漫图像。作者认为手绘图像通常是世界的忠实表现，但在定量上存在不一致性，因此需要恢复3D结构。

本文提出了一种基于用户友好的注释工具、相机姿态估计和图像变形的流程，以恢复密集的3D结构。该方法将图像扭曲以遵循透视相机模型，使得对齐的结果可以插入新视角合成重建方法中，从而可以从以前未绘制的视角体验卡通。

本文的亮点在于提供了一种恢复手绘卡通和动漫图像的3D结构的方法，可以为新视角合成提供基础。作者提供了一个用户友好的注释工具，并使用了多个数据集进行实验验证。论文还提供了一个名为Toon3D Studio的项目页面。

最近的相关研究包括利用深度学习技术进行卡通图像的3D重建，如“DeepToonify: 卡通图像的3D重建和动画化”（DeepToonify: 3D Reconstruction and Animation of Cartoon Faces with Deep Learning）。