来源:广播与电视技术
翻译:雷瑞涵
审稿:杨 宇
图1 Adobe Firefly在Premiere Pro中AI生成的视频
继图像、矢量和设计之后,Adobe公司将Firefly系列创意生成式AI模型扩展到了视频领域。该公司表示,Firefly视频模型是首个公开发布的“商业安全”的视频模型,目前处于限量公测阶段。
Premiere Pro是媒体与娱乐行业最受欢迎的视频制作系统之一。其新增了生成式AI功能,这对于广播公司来说可能是Adobe Max大会上的最热新闻。然而,该“生成扩展”人工智能并不是完全意义上的生成式人工智能,而是一个允许创作者扩展画面、平滑转场或延长镜头以实现完美效果的功能。
Adobe公司表示,Firefly生成式AI模型的训练内容均来自Adobe Stock等授权内容或公共领域内容,其功能开发遵循问责制、负责任和透明性的AI道德原则,也就是说该模型生成内容具有所谓的“内容凭据”。
该公司表示:“自2019年内容真实性倡议发起以来,Adobe一直倡导将内容凭证作为数字内容透明度的行业标准广泛采用,目前已有3700多名会员支持这一倡议。内容凭证就像数字内容的‘营养成分表’,可以显示其创建和编辑方式。内容凭证已被应用于Creative Cloud中由Firefly提供支持的部分功能,以表明生成式AI的使用。”
Adobe公司透露,自2023年3月首次发布测试版以来,Firefly已被用于生成超过130亿张图像,在过去六个月中增加了超过60亿张。
Adobe数字媒体首席技术官Ely Greenfield表示:“Firefly在我们的创意应用程序中使用率非常高。看到创意社区利用Firefly不断突破极限让我们深受鼓舞。我们很高兴能为创意专业人士提供更多经过商业安全设计的构思和创作工具。”
Firefly视频模型扩展了Adobe公司旗下已经包括图像、矢量和设计模型的生成式AI模型系列,这使Firefly成为针对创意团队的最全面的模型产品。Adobe现在通过限量公测版获得了一小部分创意专业人士的初步反馈,这些反馈将用于继续完善和改进模型。
Firefly推出不到一年,便被引入Photoshop、Express、Illustrator、Substance 3D等软件,同时支持Creative Cloud中的各种工作流程。Firefly还支持100多种语言的文本提示词。
其他新功能包括:
文生视频和图生视频(测试版)
该功能由Firefly视频模型提供支持,现已在Firefly网络应用中推出限量公测版,创作者可以使用最新的文生视频和图生视频功能。通过文生视频功能,剪辑师可以使用文本提示词生成视频素材,并访问各种摄像机控制功能(如视角、运动和变焦)来微调视频;或者结合参考图像生成B-roll,无缝填补视频时间轴中的空白。图生视频功能支持创作者将静态照片或插图转化为精彩的动态片段,让图像动起来。
Firefly Image 3:生成速度提升
Firefly Image 3模型升级后,各种水平的创作者都可以在几秒钟内生成图像,其速度是过去的4倍。该模型现在可以通过Firefly网络应用使用。
Photoshop:新增生成工作区(测试版)
Photoshop中,由Firefly支持的生成工作区让设计师可以进行同步构思、集思广益和概念迭代。
Illustrator:Firefly矢量模型(测试版)增强
Adobe Illustrator新增了生成式形状填充、生成式重新着色和文生纹样功能,全部由今年早些时候推出的最新Firefly矢量模型提供支持。这些功能使设计师能够快速构思或添加具有自己独特风格的具体矢量图形到现有的设计中。最新版本的Firefly矢量模型支持创作者进一步控制单个图案中的元素密度,以改变这些元素密铺排列的方式。
此外,Adobe还在会议上预览推出了Project Concept项目。该项目是一种用于多人协作创意概念开发的新功能,让创意专业人士能够实时混合图像,从而在同一画布中同步构思。
Adobe还在面向企业的创意和生成API集合Firefly Services中发布了新的产品,以扩展生产工作流程。其中包括目前处于测试阶段的Dubbing和Lip Sync,它使用生成式AI处理视频内容,将口语对话翻译成不同的语言,同时保持生成内容与原始内容的音色一致和唇形同步。由Firefly Services提供支持的Bulk Create目前也处于测试阶段,它将使专业人士能够更高效地编辑大量图像,简化调整大小或去除背景等批量处理任务。
好文共赏请转发 有话要说请留言