全球首个AI短剧平台SkyReels AI重磅发布,“一人一剧”的梦想即将成为现实!

科技   2024-08-20 07:31   中国  

点击上方关注 “终端研发部

设为“星标”,和你一起掌握更多数据库知识        


这模型竟然做到了一人一剧,也太叼了吧?

对于创作者而言,无需费力剪辑,分镜可以自动转换为连续视频,所有流程成果可以一键整合,快速生成最终短片。并且生成支持1080P 60帧的高清像素视频,并且单次可生成视频长度达180秒,

打开 SkyReels 网页,立刻感到「AI 短剧」与其他 「 AI 创意」平台的设计,很不一样。

只要输入一个概念或故事创意,点击「创作类型」, 比如情感剧,系统会自动生成一份符合要求的剧本,结构完整、情节丰富。

看下面的效果图:

制作视频一气呵成!

与传统的视频生成相比,WorldEngine在成本上实现了革命性地下降,可大幅降低百倍以上。同时,生成速度也提升了数个量级。

不过这次发布,也确实带来了很多的亮点:

1、全自动化生成剧本

用户输入概念或创意,AI将一键生成一份结构完整、情节丰富的剧本,并支持已有剧本的自动整理与润色

当然创意我们也可以通GPT等其他大模型进行生成,不过SkyReels AI效果支持了

2、情节设计

AI 将根据剧本内容,自动生成一系列分镜图,每个分镜图都包含了镜头的角度、角色的位置和动作。创作者可以根据自己的喜好调整这些分镜,比如改变镜头的角度或者增加特定的动作,以更好地传达故事的情感。

个性化定制

创作者可以选择不同的视觉风格,比如动漫、卡通或真人 3D,来呈现他们的短剧。SkyReels 提供了多种角色形象和音色的选择,创作者可以根据自己的故事和目标受众来定制角色的外观和声音

还可以一键生成一系列分镜图,每个分镜图都包含了镜头的角度、角色的位置和动作

SkyReels不仅能够自动生成剧本,还支持用户根据需要调整剧本内容,通过StoryboardGen,用户可以定制化分镜效果,Sky3DGen则负责生成3D场景和角色,WorldEngine确保了整个创作流程的流畅性和高效性。

让我更加震撼的就是SkyScript AI都是自研技术集成的:

剧本大模型SkyScript、

分镜大模型StoryboardGen、

3D生成大模型Sky3DGen,

WorldEngine——业界首个将AI 3D引擎与视频大模型深度融合的创新平台。其次算法团队设计了渐进式生成的剧本生成框架,实现了模型能够输出高度结构化的精彩剧本,无论是新手作者还是资深剧作家,都能通过它激发创意,轻松创作出引人入胜的短剧剧本。

在使用 SkyReels 平台时,创作者输入剧本后,平台的 StoryboardGen 模型会自动将剧本内容分解成两个主要部分:全局描述和主体定制。全局描述包括场景设定、景别选择和构图设计等元素,这些是对分镜的整体指导。而主体定制则涉及角色形象、动作和人物角色的具体细节。

通过这种方式,StoryboardGen 能够生成一个完整的分镜故事板。

StoryboardGen的专项多智能体架构,能够有效保证人物与场景的可控性和一致性,创造出高质量的工业级分镜。

我们来看一下剧本大模型质量评估:

看到没,SkyReels在整个视频生成中目前在国内是非常靠前的,并且都是由 AI 驱动,但「 AI 创意」平台以图片、视频生成为主,SkyReels 则集剧本生成、角色定制、分镜设计、视频拍摄与合成于一体, 完整复制了短剧工业化流程。

昆仑万维的AI短剧平台SkyReels的推出,标志着全球AI短剧创作领域的一次技术革命。这一创新将简化并加速视频内容的制作流程,使创作者能够专注于创意和灵感的表达,不再受繁琐、复杂的传统制作步骤的束缚。

通过AI技术,“一人一剧”的梦想,即将成为现实!

计算机专业必读书籍:

2024年必读高质量计算机编程书籍

最后说一句(别白嫖,求关注)


回复 【idea激活】即可获得idea的激活方式

回复 【Java】获取java相关的视频教程和资料

回复 SpringCloud获取SpringCloud相关多的学习资料

回复 【python】获取全套0基础Python知识手册

回复 【2020】获取2020java相关面试题教程

回复 【加群】即可加入终端研发部相关的技术交流群

阅读更多

重磅!OpenAI正研发ChatGPT文本水印技术,其他大模型将何去何从?

2024年必读高质量计算机编程书籍

一条 SQL 引发的事故,同事直接被开除!!

太扎心!排查阿里云 ECS 的 CPU 居然达100%

一款vue编写的功能强大的swagger-ui,有点秀(附开源地址)

首位 AI 科学家问世

相信自己,没有做不到的,只有想不到的

在这里获得的不仅仅是技术!


喜欢就给个“在看

互联网科技小于哥
大家好,我是小于哥呀 1、在这里已经为1000+人,提供专业的求职/技术咨询。 2、每天持续干货输出,同时也做专业面试指AI相关的知识,多次受邀成为圆桌嘉宾; 3、每天持续分享互联网,科技,开发技术,毕设和AI相关的知识,同时也做专业面试指
 最新文章