码迷,mamicode.com
首页 > 其他好文 > 详细

三十六亿的《哪吒》历时五年,动画创作难如何解决?

时间:2020-09-18 12:19:53      阅读:43      评论:0      收藏:0      [点我收藏+]

标签:质数   描述   错误   夏天   info   炸裂   电影   动作   彩色   

https://mp.weixin.qq.com/s/6bI8tvRbzopGGBwayB1XBA

By 超神经

场景描述:《哪吒之魔童降世》自 7 月 26 日上映以来,好评如潮,票房一路高歌猛进,目前已突破 36 亿。这款火爆的动画背后,是主创团队历时 5 年的细致打磨。而这漫长的制作过程中,人工智能技术在其中助推多个环节的进展,让《哪吒》更早地呈现在我们眼前。

关键词:哪吒  动画电影  自动上色  视频生成 

哪吒又双叒叕破纪录了!

电影《哪吒之魔童降世》自 7 月 26 日上映以来,一直在刷新动画电影的票房纪录。截止目前,19 天里全网票房突破 36 亿,观影人数超过 1 亿!成为了首部观影人数破亿的动画电影。

技术图片
哪吒之前,国内的动画电影票房最高记录是 15 亿

在票房疯长的背后,它在豆瓣的评分也维持在 8.6 分,不少人开始感慨:中国动画的里程碑来了。

这样一部改编自神话故事的电影,凭什么像国漫界的一匹黑马,收获如此高的票房呢?

技术图片
我哪吒是靠颜值收获的这么一大波粉丝吗

除了颠覆的人物设置,全新的故事设定,为观众带来惊喜之外,精致的视觉效果,更是《哪吒》如此炸裂的关键。这些酷炫的视觉效果,让一个又丧又皮的「魔化」哪吒,成了这个夏天最「靓」的仔。

险些让哪吒难产的动画制作

观众被这个最「靓」的仔深深吸引之时,不会想到,他曾险些遭遇难产。

每部爆款电影的背后,都离不开主创团队的细心打磨,而繁琐的程序,往往让制作时间拉得很长,甚至会有作品熬不下去,中途夭折。

《哪吒》的制作过程也同样不易,但所幸,历时五年之久,最终总算是被「死磕」出来了。

这部时长 110 分钟的动画电影,共经历了 66 次剧本修改,有 20 多个专业外包团队,1600 多位动画制作人员参与制作,全片共有 1400 多个特效镜头。

技术图片
电影里万龙甲由来片段

由此可见,一部优秀的动画,注定是一项浩大的工程。不少从业人员都吐槽过,动画制作完全是个「苦力活」。在导演的采访资料里,也爆出了因工作繁重,外包团队离职率陡增的情形。

大量人物形象制作,分镜动画绘制,以及特效的制作,都是费时耗力的过程。短短十几秒画面,可能就需要几个团队几个月的努力。

技术图片
丑萌的哪吒魔化后帅炸

尽管团队投入大量精力,但仍然有很多问题不是能仅靠死磕就可以解决的。比如片中灵珠和魔丸结合时,导演本想营造时光倒退,万物归一的视觉效果。但该镜头在经过几个月的尝试后,终因达不到预期而被舍弃。

类似这样的制作难题,是限制动画发展的一大因素。倘若制作流程能够更加高效,或许就会涌现更多的优质电影。而这个方面,人工智能技术能给动画行业带来新的契机。

解放原画师:AI 线稿上色

动画的制作过程中,基本的环节就是完成画稿的绘制,而对这些画稿完成上色,则是一项浩大的工程。
技术图片

值得一提的是,哪吒的形象前后设计了 100 多个版本

对于普通的 12 帧率动画,按 25 分钟计算,需要 18000 张图画。对于一个 10 人的团队来说,约需要 2 个月才能完成。

但基于 AI 的工具,效率会得到极大的提升。比如当下最优秀的技术,完成一集动画仅需 2.5 小时,效率提升达到了 2000 倍之多。

最近在 GitHub 上星数过万的 Style2paints ,就是这样一个充满魔力的绘制工具。通过它,制作人员能够快速完成复杂的上色流程。
技术图片

有四个步骤:从线稿开始,右上角上平面颜色
左下角加入有梯度的颜色,右下角加入阴影

Style2paints 由苏州大学和香港中文大学的研究者共同打造,最新版本已升级到 V4。它也被评为最好的线稿上色 AI 工具。

Style2paints 基于无监督的深度学习,通过风格迁移和 GAN 技术,将线稿原画变成饱满的彩色图画。

整个过程分为两个阶段,第一阶段将草图渲染为粗略的彩色图画。为完善画面,第二阶段会识别其错误并进行细化,以获得最终结果。

而使用起来也很简单,只需画师完成线稿,然后通过鼠标点击,就能得到饱满的彩色画稿。对于要求高的画师,可能还需要些许的微调。

技术图片
GitHub 上的操作指南

解放动画师:神经网络自动补帧

动画电影的制作中,有关键帧和中间帧之分,中间帧是串在两个关键帧之间的画面,起到衔接和让画面流畅的作用,但其制作却是动画中耗时严重的过程。

技术图片
深色的三个动作是关键帧,浅色的是中间帧

如果给出一段视频的相邻的关键帧,让 AI 去补充出中间的画面,工作量就会大大减少。

谷歌 AI 前段时间公布的生成模型,就是按照这个思路,在一定程度上解决了问题。
技术图片
模型示意图

他们发布的这套 AI 系统,包含一个完全卷积模型,由 2D 卷积图像解码器,3D 卷积潜在表示生成器,和视频生成器组成。

通过将图像解码,除了将输入视频信息解码,还将目标视频的信息映射到潜在空间。而潜在表示生成器将两种信息合并,最后由视频生成器解码达到预测的中间帧。

AI 生成的视频帧序列,在风格上与给定的起始帧和结束帧保持一致,而且整体看起来很顺滑。令人惊喜的是,此方法可以较长的时间段内实现视频生成。

技术图片
使用 Kinetics 数据集从静态图像创建出的视频

在他们的研究中,一些视频的生产效果喜人,但也有一些复杂的视频,出现了奇怪的画面,仍待改进。

解放导演:文本生成动画

当然最惊喜的功能,也许要数 AI 直接从剧本生成动画。那些无法做出来的场景效果, 也许在 AI 手中,会得到解答。

在前段时间,迪士尼和罗格斯大学的科学家发表了一篇论文,介绍了一款用文本描述生成动画场景的 AI 模型。

技术图片
要让 AI 实现从文本到视频的生成,需要其「理解」文本,然后生成对应的动画。为此他们采用了多个模块组件的神经网络。

这个模型包含三个部分,一是脚本解析模块,自动将剧本文本中的场景解析出来,然后是自然语言处理模块,能够提取出主要描述句子,并提炼出动作表示,最后是一个生成模块,将动作指令转化成动画序列。

技术图片
模型的流程示意

研究人员,从可自由获取的电影剧本中,搜集了上千个剧本,从中选取了其中的 996 个,编写了场景描述语料库。

这个语料库由 525,708 个描述组成,包含 1,402,864 个句子,其中 920,817 个包含有至少一个动作。

建立起描述和视频的映射,从而通过输入剧本,能够生成简单的动画片段。在测试实验中,生成动画的合理性为 68%。

虽然该系统还依赖于语料库,不能百分百完成文本到视频的生成,但在动画制作上带来了新的方向。

技术图片
迪士尼还研究过自动生成与语音相匹配的动画口型

AI 颠覆动画的路还有多远

《哪吒》的火爆,让人们再次注意到了动画电影的潜力,而这部打破传统的电影,还在向着它的新纪录奔去。

虽然说 AI 技术在动画制作上有了一些良好的尝试,但这些技术只有更趋完善和成熟,才能真正被电影制作人所利用。

期待未来技术的发展,让我们不需要等待漫长的五年,就能看到更多《哪吒》这样的经典之作。

技术图片

—— 完 ——
技术图片
技术图片

扫描二维码,加入讨论群
获得更多优质数据集
回复「进群」自动入群
更多精彩内容(点击图片阅读)
技术图片

三十六亿的《哪吒》历时五年,动画创作难如何解决?

标签:质数   描述   错误   夏天   info   炸裂   电影   动作   彩色   

原文地址:https://blog.51cto.com/14929242/2534792

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!