编辑 | 杨文

好消息!好消息!

ChatGPT 图像生成功能现已对所有用户开放啦!

换句话说,即使是免费用户,也可以用 GPT-4o 生成最近爆火的吉卜力风格图片。

有网友在 X 上发布了自己使用 GPT-4o 和可灵制作的动画视频。


视频来自:X博主
@techhalla

这效果,难道不比那部花 7 年时间干出来的《美人鱼的夏天》强多了?



2024 年的压轴抽象热梗:自己↘吓↗自己~

上周五,我们也用 GPT-4o 和可灵,,没想到小火了一把。

截至目前,该视频在全网已有近 30 万播放量。不少网友还在评论区「催更」,要看全集。

我先交个底:全集是没有的,但偶尔整个活儿,还是可以滴。

由于上次时间有限,并未给动画角色对口型,这次我们决定来个进阶版,让吉卜力风格的甄嬛真正开口「说话」。

应网友要求,我们选用的是《甄嬛传》中「皇后杀了皇后」这一经典名场面。

这是原版:

这是我们制作的吉卜力版:

不知合不合各位老铁的口味啊?

接下来,我们就公开整个制作流程。

第一步:截镜头 + GPT-4o 转绘。

与上期操作一样,找到《甄嬛传》原版视频片段,截取其中几个关键镜头。

别看短短 30 多秒的视频,里面涉及不少转场镜头,为了让画面更加连贯丝滑,我们截取了 8 个关键帧。

然后,将这些画面逐一上传至 GPT-4o,并输入提示词:「请帮我把这张照片转成吉卜力风格」。

上效果:

有网友表示,GPT-4o 有时会拒绝生成吉卜力风格图片,这当然也有破解之道,我们可以使用「垫图法」绕过系统限制。

只需要上传一张吉卜力风格的图片,再上传想要重绘的图片,输入提示词「用图 1 的视觉风格重绘图 2」。

第二步:图片转视频。

这一步就是将风格化后的图片动起来。

由于原视频片段中包含不少大幅度动作和细微的表情特写,所以一开始我们打算用 Viggle AI 的「Move」功能来生成。

只需将风格化后的图片和对应的原视频片段逐一上传即可。

实测一番发现它确实有两把刷子:


不过也有翻车的时候。比如甄嬛的这个转头动作:


Viggle AI 虽然捕捉到了动作,但对于细节的把握较为粗糙,尤其是甄嬛的头饰,明显出现鬼影、闪烁、变形等问题。


此外,我们也可以使用可灵 1.6 的「图生视频」功能,上传图片,再输入提示词。

为了获得更好的生成效果,在进行提示词描述时,尽量简洁而准确地给出人物、动作和神态,比如「这个女人慢慢转过头去,留下一个背影」、「这个女人悲伤严肃地眨着眼睛」等。

来看看效果:



总之,Viggle AI 和可灵 1.6 各有优缺点。

Viggle AI 可以在不输入提示词的情况下,还原人物动作、神态,但画面经常不够精美,易出现重影、抖动等瑕疵。

可灵 1.6 模型生成效果更稳定,但对提示词的撰写要求较高,这么说吧,提示词质量的高低直接影响最终的生成效果。

因此,我们的建议是二者搭配「食用」,不好描述提示词、且涉及大幅度运动时使用 Viggle AI,想要精美画面时则选用可灵 1.6 模型。

第三步:对口型。

市面上关于对口型的 AI 工具已有不少,比如可灵、即梦以及之前介绍过的 Hedra。

在这个「皇后杀了皇后」的名场面中,有两处安陵容的忏悔需要对口型。为了省事儿,我们直接使用了可灵的对口型功能。

生成相应的视频后,我们点击「对口型」,然后上传对应的音频就 OK。

来看看效果:

当然我们也可以使用即梦和 Hedra。

这是即梦的效果:

这是 Hedra 的效果:

最后,我们把原视频和生成好的素材全部导入剪映中,逐一对应音频后再自动加入字幕即可。

OK!今天的 AI 小课堂就到这儿啦,古德拜!

工具链接:


GPT-4o 链接:https://chatgpt.com/

可灵 AI 链接:https://app.klingai.com/

Viggle AI 链接 :https://viggle.ai/

即梦 AI 链接:https://jimeng.jianying.com/

Hedra 链接:https://www.hedra.com/

剪映

以后我们会带来更多好玩有用的 AI 评测,也欢迎大家进群交流。

© THE END

转载请联系本公众号获得授权

友情提示

本站部分转载文章,皆来自互联网,仅供参考及分享,并不用于任何商业用途;版权归原作者所有,如涉及作品内容、版权和其他问题,请与本网联系,我们将在第一时间删除内容!

联系邮箱:1042463605@qq.com