视频大模型乱斗开启？Runway、Luma、可灵同时开放API

文摘 2024-09-30 12:01 山东

引言：

最近AI视频生成领域十分的热闹，堪称又一波神仙打架了，先是智谱AI直接开源了号称中国版SORA的CogVideoX，引发了一波强烈关注。随后minimax上线了海螺AI，在一致性上有了很大的提升，很多人惊呼AI可以直接做短剧了。

最近字节又更新了豆包-PixelDance，更是把这波视频大模型的爆发推向了高潮。

新的大模型汹涌而来，老牌AI视频厂商自然会有危机感，可以预见在不远的未来AI视频生成赛道也会卷出天际。让我们来看看最近各家都有什么新动作吧！

Runway Gen-3与Luma同时开放 API

Runway

Runway在前几天就宣布了开放自家主力大模型Gen-3 Alpha Turbo的API，Runway也宣称此次发布代表着向更广泛的开发人员、企业和创意人士提供先进的人工智能能力迈出了重要的一步。

早期接受者：Gen-3 Alpha Turbo API已经被 Omnicom 等战略合作伙伴使用，Omnicom 是一家全球创意广告公司，也是业内最具创新精神的市场营销专家的所在地，这表明它已经准备好用于企业级应用程序。

Runway API的初始访问和分阶段计划：我们正在采取分阶段的方法，以确保所有用户都能顺利实现整合。目前，我们正在向精选的合作伙伴授予访问权限，主要关注那些希望将 Runway的 API整合到其产品和服务中的大型团队和机构。这一初始阶段使我们能够与这些合作伙伴密切合作，收集有价值的反馈并完善我们的产品。更广泛的发布将在接下来的几周内进行，这将逐渐向所有人开放访问权限。

价格：

根据文档显示，价格Runway API价格同他们正常视频生成一样，都是一秒钟的视频消耗5个积分。

Luma AI

几乎同时，Luma AI也开放了自家Dream Machine v1.6的API，它包括高质量的文本到视频、图像到视频、视频扩展、循环创建以及 Luma的突破性相机控制功能。

同时Luma还表示：为了构建能够与人类保持同步的智能，我们正在研究在预训练中融合视频、图像、音频、3D和语言的模型。基本上，类似于人脑的学习和工作方式。有了如此丰富的上下文，这些模型表现出对因果关系的理解，并像智能伙伴一样遵循用户意图。

可以看出来Luma为我们描绘的前景是非常好的，让我们期待一波吧！

价格：

0.0032美元/百万生成像素。即每帧0.0032美元或1280×720p的5s-24fps视频约0.4美元。

快手可灵AI全球升级1.5模型

开放API接口申请

9月19日，可灵AI迎来重磅升级，视频生成新增可灵1.5模型，在画质质量、动态质量、美学表现、运动合理性以及语义理解等方面均有显著提升。与此同时，可灵AI还引入了全新的“运动笔刷”功能，进一步提升视频生成的精准控制能力。

本次升级，可灵AI还带来了强大的“运动笔刷”功能，大幅提升了图生视频时创作者对运动效果的控制能力。“运动笔刷”功能支持为图片中的元素（人或物体等）指定运动轨迹，用户只需将图片中需要控制运动方向的部分勾勒出来，然后画一个示意运动方向箭头，就可实现精准运动控制。