2024年国产AI视频生成体验:从MiniMax到快手(可灵)与字节跳动(即梦)

文摘   2024-09-02 22:13   北京  

Minimax于2024年8月31日悄然发布了其首个大规模视频生成模型,并推出了一段名为《魔法硬币》的2分钟视频。在2024年,AI视频生成领域就像突然间被打通的任督二脉,各大厂商争先恐后地推出了他们的最新成果。你可能会问:“这玩意儿真的有用吗?” 让我来为你揭开这个神秘的面纱。

首先,我们来说说MiniMax。尽管该模型的具体技术参数尚未公开,闫俊杰透露,这只是第一版本,后续将会有更多的数据、算法和使用细节的迭代更新。Minimax团队在研发过程中克服了许多技术难题,特别是在如何高效训练视频生成模型上,他们成功地通过算法优化大幅提高了视频的压缩比,从而延迟了模型的发布。

可灵 (Kling) 是快手科技推出的最新视频生成模型。这个模型利用了先进的3D时空注意力机制和扩散变压器技术,能够生成长度高达两分钟、分辨率达到1080p的高质量视频。可灵模型可以处理复杂的运动和物体之间的交互,模拟现实世界的物理特性,并支持多种视频输出比例。这个模型目前已经在中国通过快手的“快影”应用程序进行测试。


即梦 (Dreamix) 是字节跳动开发的另一个强大的视频生成模型,它能够根据用户提供的文本提示生成高质量的视频内容。虽然即梦模型在生成内容时可能在创意和表现力上略有不同,但它与可灵一样,旨在为用户提供丰富的创意工具,帮助他们轻松创建复杂的视频内容。


实测体验:给“科技公寓”生成一个视频

为了更直观地体验这些模型的能力,我决定为“科技公寓”这个介绍生活中科技产品的公众号生成一段介绍广告视频。我给ChatGPT描述了一下科技公寓的特点——它介绍生活中能够用到的科技产品,然后将这些描述分别输入到MiniMax、Kling和即梦中。

chatgpt生成的故事如下:

故事背景

主角:一名年轻的都市白领小张,他对科技非常感兴趣,但对如何将科技融入生活还不是很清楚。

1. 片段一:普通的早晨

视频内容:小张在一个普通的早晨醒来,他的公寓简单而平凡,手机闹钟响起,他疲惫地关闭闹钟,开始新的一天。

2. 片段二:发现科技公寓

视频内容:小张在上班途中无意间看到手机上的一篇推荐文章,标题是“科技公寓:让科技改变生活”,他好奇地点开,进入了科技公寓的世界。

3. 片段三:进入科技公寓

视频内容:画面转换,小张走进科技公寓的虚拟房间,四周逐渐亮起,各种高科技产品依次显现出来,他惊讶地四处打量。

4. 片段四:体验智能生活

视频内容:小张体验了智能家居的便利:他用语音命令打开灯光、调整温度,甚至可以让AI助手安排他的日程和播放音乐。

5. 片段五:沉浸式娱乐

视频内容:接着,小张戴上XR头盔,进入一个虚拟的游戏世界,他完全沉浸其中,与虚拟角色互动,享受前所未有的娱乐体验。

6. 片段六:科技与工作

视频内容:在科技公寓,小张看到如何使用最新的软件和硬件提升工作效率,比如通过AI工具快速生成报告,或者通过3D建模工具完成创意设计。

7. 片段七:现实的改变

视频内容:小张回到现实生活,他受到启发,开始逐步将科技融入自己的生活:智能设备、XR娱乐、AI助手一一出现在他的真实公寓里,生活质量显著提高。

8. 片段八:结尾与呼吁

视频内容:小张在他的科技公寓里,拿起手机浏览科技公寓的公众号,最后的画面定格在公众号页面和二维码上。

下面看看3个模型的表现吧:

MiniMax:慢工出细活

这个模型的生成过程虽然比其他对手稍慢一些,需要等待每段片生成完成再进行下一段,但它的写实风格无疑是一大亮点。当你耐心等待每一条视频片段生成完毕时,你会发现那些细节和真实感让人觉得仿佛置身其中。这种精益求精的态度让我不禁想起老手艺人,慢工出细活,只为呈现最完美的作品。尽管如此,等待的时间也确实考验人的耐心——毕竟,这年头谁还有时间慢慢等呢?

快手的Kling:用自己的素材打造“家”的感觉

接下来,轮到快手的Kling上场了。你知道,快手毕竟是靠短视频起家的,他们对素材的敏感度和驾驭能力无出其右。所以,Kling生成的视频片段不仅流畅,而且富有生活气息。说实话,我怀疑这些视频是不是直接从快手的素材库里扒出来的

字节跳动的即梦:科幻风与高效工作流

再来说说字节跳动的即梦,这款模型给人的第一印象就是两个字——科幻。而且,它的工作流设计得非常出色,你可以一次性输入多个片段,然后一起生成并直接剪辑导出。对于那些懒得来回切换窗口的小伙伴们来说,这种“批量处理”的方式简直就是福音。想象一下,喝着咖啡,轻松搞定一整条视频,不费吹灰之力。

总结:AI视频生成的未来——拼片段也能成功

虽然这些AI模型目前生成的多是短片段,但我们不禁要问,真正的影视作品又有多少是一镜到底呢?聪明的导演会把这些高质量的片段整合成一部有趣的视频,这就是未来的趋势。所以,各位导演们,是时候开始用这些AI工具拼凑你们的大片了!

怎么样,听起来是不是很酷?如果你对AI视频生成有兴趣,或者对这些模型有任何问题,欢迎在评论区跟我互动。别忘了分享这篇文章,让更多人了解这些有趣的科技进展!

科技公寓
探索未来科技和生活(前TechVerse)
 最新文章