上周抽些零碎时间,尝试完全用 AI 工具完成编剧、分镜、制图、动画、作曲的一个三分钟小故事(具体使用的工具清单见片尾字幕)。最终得到的三分半的小短片,有一点点治愈系动画短片的味道:
这个小实验花费一个人(我自己)大约10个小时(三四天里抽出的零碎时间)完成。从效率上说,肯定是远胜传统动画(哪怕是走马灯式的最简动画)的制作了。
人类在这里只负责:(1)提出创意;(2)与AI大语言模型讨论故事走向;(3)挑选最好的故事脚本;(4)指挥AI工具生成图片和动画;(5)告诉AI作曲工具需要的背景音乐调性;(6)最终的视频合成。
目前看,这个故事的整体水平还很难超越人类编剧、美术和动画制作的平均标准。将人类各项标准设置为100分的话,这个小实验里各项AI工具的输出质量打分大概是:
AI负责的任务 | 质量(取人类标准为100分) |
AI编剧 | 30分 |
AI分镜 | 50分 |
AI美术创意(文生图) | 70分 |
AI动画(图生视频) | 50分 |
AI音乐(文生音乐) | 60分 |
从上表中也可以看出,目前人类创作者搞AI影视、AI动画的最大短板是AI还没法得到高质量的故事。如果完全依赖AI,大语言模型讲出的故事几乎注定是残缺、单薄或俗套的。这一年来,参加AI短片比赛并取得好成绩的,或网上取得最好传播的那些作品,几乎都是人类写的故事、人类设计的框架,里面填上AI生成的图片、视频素材。
单从目前生成式AI(GenAI)在文本、图片、视频、音乐等任务上的技术水平上看,AI最大的优势,一个是效率:
专业编剧搞几星期或几个月的故事,AI可以在几分钟内写一个粗糙、幼稚但忍一忍也勉强可用的(30分水平);或者,AI可以在一小时内,与专业编剧互相发散思维,给编剧提供几十部已有小说、影视的参考,或者提供几十个发散的人物设定与情节发展方向
创意和风格探索,以前要美术师做大量工作,给出无数参考图;现在用AI可以在一两个小时内,探索几十种不同美术方向
迅速成片:不用摄影棚,不用请专业演员,给一段参考文字或一张参考图,就迅速搞出5秒或更长的动图视频
另一个是超现实:
现实中没有的东西,原来必须动用绿幕加后期特效,高成本投入;现在用AI有一定可能,可以几分钟搞出动图来(虽然成片率很低,质量还不大过关)
还有最后一条,也是最容易被人忽视的一条,是创作自由:
专业影视、动画团队目前还很难用AI完成高质量、长时长内容;但这个事情的反面是:业余创意爱好者、故事爱好者、动画爱好者自己在家里就可以搞出有意思的短片来——这个创作自由,解放的可能是不可限量的创意与自我满足感
考虑最近半年AI视频生成质量的突飞猛进,所有人皆可用的“故事生成工具”一定是未来几年最有趣的AI赛道。我个人觉得,半年或一年后,业余爱好者利用AI来自由创作、分享,会像很多年前手机拍摄、手机剪辑进入大家生活那样,成为内容制作史上又一个里程碑式的大事件。
我们团队正在开发、迭代的 Mootion Storyteller ( mootion.com ),就是在这个方向上的重点产品探索。目前先从最初级需求开始,不断迭代、升级。