提出了3D 动态摄影和静态图片结合技术，一种将二维图像动画与三维摄影结合起来的新技术。给定一张静止的图像作为输入，目标是生成一个包含视觉内容动画和摄像机运动的视频。

3D Cinemagraphy from a Single Image

Xingyi Li, Zhiguo Cao, Huiqiang Sun, Jianming Zhang, Ke Xian, Guosheng Lin

 [Huazhong University of Science and Technology & Adobe Research & S-Lab, Nanyang Technological University]

要点：

  1. 根据经验发现，将现有的二维图像动画和三维摄影方法结合起来，会导致明显的假象或不一致的动画。关键是，在三维空间中表示和动画化场景为这项任务提供了一个自然的解决方案。
  2. 为此，首先使用预测的深度值将输入图像转换为基于特征的分层深度图像，然后将其解投影为特征点云。
  3. 为了给场景制作动画，进行运动估计并将二维运动提升到三维场景流中。
  4. 最后，为了解决点向前移动时出现空洞的问题，建议根据场景流双向置换点云，并通过将它们分别投射到目标图像平面并混合结果来合成新的视图。广泛的实验证明了方法的有效性。还进行了一项用户研究，以验证方法令人信服的渲染结果。

https://arxiv.org/pdf/2303.05724.pdf

 

 

内容中包含的图片若涉及版权问题，请及时与我们联系删除