本文来源  机器之心  编辑:张倩

我们离真正的「AI 电影」不远了?


Midjourney 是很多人都在使用的一款文生图工具。结合最近更新的视频生成工具 Runway Gen2,你甚至可以自己制作一个电影预告片,最近社交媒体上很火的《Trailer: Genesis》(《创世纪》)、《流浪地球 3》电影预告片都是借助这些 AI 工具生成的。


不过,这些「预告片」都有一些局限,比如时长短、画面缺乏变化。要想克服这些局限,如何更好地利用以上工具成了摆在所有制作者面前的难题。

最近,一位名为「Chase Lean」的推特博主在 Midjourney 的使用上「发现了新大陆」。他表示,只要在 Prompt 里使用一些技巧,你就能让 Midjourney 生成数张角色高度一致的图像(Midjourney 默认生成 4 张角色相对随机的图像),而且角色的拍摄角度、所处环境可以是非常多样的。如果用到上述电影预告片的制作中,这相当于为制作者提供了更多样的素材,以此为基础生成的视频将更具故事性。


Chase Lean 是怎么做的呢?以一次性生成 6 张同一人物图为例,他的做法是在 Prompt 中加入「split into 6 different images, shot from multiple angles」。不过,这个方法并非 Chase Lean 首创。他表示,自己的灵感来自一位名叫「juliewdesign_ 」的推特博主,这位博主发现了「image split into 2」在 Prompt 中的妙用(生成两张角色一致的图像)。


Chase Lean 延续了这一做法,并在此基础上进行了扩展。比如,你可以按「V4」按钮让生成的若干张图像更富于变化(V1、V2、V3、V4 对应了生成的四张图片,点击其中一个按钮,系统会推送四张对应图片的细节调整版)。


以下是变化的结果:


更有意思的是,如果结合 Midjourney 6 月份推出的「Zoom Out」功能,你甚至能得到更多图像(按 Zoom Out 按钮可以像调整焦距一样把更大的画面包含到镜头中,完成特写到远景的切换,Midjourney 5.2 版本提供了三种缩放选择,分别是 1.5 倍、2 倍以及「1.0 到 2.0」之间的自定义缩放):


不断重复以上的「变化」、「缩放」等操作,理论上你可以得到无限多的同一角色的图像。

如果想改变图像背景(环境),你可以先选出想修改的图像(按 U1-U4 按钮),然后按「Custom Zoom」按钮,这个按钮允许用户同时缩放画面和修改 Prompt。此时,在 Prompt 中加入沙滩、城市等自定义环境的词,你就可以获得同一角色场景多样的图像。


从生成的图中可以看到,某些图其实尺寸非常小,而且环境画面是不完整的。要解决这个问题,Chase Lean 建议使用 Clipdrop 网站上的「Uncrop」功能。


Chase Lean 表示,这种一次生成多张图像且保持角色一致的方法在现实中有很多用途,他已经在时尚、家庭、动漫等多种场景中进行了尝试。


有个比较有趣的场景是为孩子制作漫画书。比如,以「a boy surfing at the beach, blue waves, palm trees, 3d, unreal engine; split into 4 different images, shot from multiple angles —niji —style expressive」为 Prompt,Chase Lean 一次就生成了以下 8 张图。


按下「Zoom Out 2x」按钮,他得到了更多图像:


如此简单的方法却如此有效,Chase Lean 的分享给了很多人启发。



有人已经按照步骤,「复现」了 Chase Lean 在推特上展示的效果。


按照这样的进展速度,我们离看上真正的「AI 电影」可能已经不远了。

参考链接:https://twitter.com/chaseleantj/status/1693246015124713634


关注公众号【机器学习与AI生成创作】,更多精彩等你来读

卧剿,6万字!30个方向130篇!CVPR 2023 最全 AIGC 论文!一口气读完

深入浅出stable diffusion:AI作画技术背后的潜在扩散模型论文解读

深入浅出ControlNet,一种可控生成的AIGC绘画生成算法! 

经典GAN不得不读:StyleGAN

 戳我,查看GAN的系列专辑~!
一杯奶茶,成为AIGC+CV视觉的前沿弄潮儿!
最新最全100篇汇总!生成扩散模型Diffusion Models
ECCV2022 | 生成对抗网络GAN部分论文汇总
CVPR 2022 | 25+方向、最新50篇GAN论文
 ICCV 2021 | 35个主题GAN论文汇总
超110篇!CVPR 2021最全GAN论文梳理
超100篇!CVPR 2020最全GAN论文梳理

拆解组新的GAN:解耦表征MixNMatch

StarGAN第2版:多域多样性图像生成

附下载 | 《可解释的机器学习》中文版

附下载 |《TensorFlow 2.0 深度学习算法实战》

附下载 |《计算机视觉中的数学方法》分享

《基于深度学习的表面缺陷检测方法综述》

《零样本图像分类综述: 十年进展》

《基于深度神经网络的少样本学习综述》


《礼记·学记》有云:独学而无友,则孤陋而寡闻

点击一杯奶茶,成为AIGC+CV视觉的前沿弄潮儿!,加入 AI生成创作与计算机视觉 知识星球!

内容中包含的图片若涉及版权问题,请及时与我们联系删除