最近几个星期,一股由 AI 引发的「动起来」趋势席卷全网,各种让照片变视频的动画不时出现在各大社交网络的时间线上,有的还配上了音乐。
在层出不穷的应用之后,又有一个 AI 动图生成器脱颖而出,在线家谱服务公司 MyHeritage 提供的 Deep Nostalgia 服务可以为静态照片创建最佳的运动效果,成为了上个周末的热门事件。他们提供的工具有点像 iPhone 上的 Live Photos 功能,其可以自动生成几秒钟的视频,以帮助智能手机摄影者找到最佳拍摄角度。
不过与 iPhone 上基于多张照片合成加挑选的方法不同,Deep Nostalgia 可以让任何相机拍摄的内容「活起来」。该工具创造的短视频中,人物以 AI 训练过程中示例人物的动作摆姿势,其目的是帮助人们以全新的视角看看过去亲人的照片。
工具链接:https://www.myheritage.com/deep-nostalgia
既然是人工智能的产物,我们自然也要首先用它来「复活」一下祖师爷——现代计算机科学的先驱阿兰 · 图灵。就用那张最经典的照片试一试:
还有什么都说过的鲁迅:
中国第一位女性建筑学家林徽因:
由于 MyHeritage 网站并没有披露这个深度怀旧项目究竟使用了哪些技术,想自己动手的研究者只能给出自己的一些猜测。
其中,比利时列日大学教授 Gilles Louppe 猜测他们是实现了三星 AI 中心 2019 年的一篇论文(《Few-Shot Adversarial Learning of Realistic Neural Talking Head Models》 。在这篇论文中,三星和 Skolkovo 研究所的研究人员只用少量甚至一张图像或画作就合成了人物开口说话状态的头部动画。
地址:https://arxiv.org/pdf/1905.08233.pdf
当然,也有人提出了其他想法,认为 NeurIPS 2019 的一篇论文(《First Order Motion Model for Image Animation》)比较接近。这篇论文完成的任务是:给定一张图片和一个包含一系列动作的驱动视频,然后生成一段新视频,新视频中的人物是源图片中的人物,动作是驱动视频中的动作。
论文链接:https://aliaksandrsiarohin.github.io/first-order-model-website/ 项目链接:https://github.com/AliaksandrSiarohin/first-order-model
内容中包含的图片若涉及版权问题,请及时与我们联系删除
评论
沙发等你来抢