点击上方关注 “终端研发部”
设为“星标”,和你一起掌握更多数据库知识
这模型竟然做到了一人一剧,也太叼了吧?
对于创作者而言,无需费力剪辑,分镜可以自动转换为连续视频,所有流程成果可以一键整合,快速生成最终短片。并且生成支持1080P 60帧的高清像素视频,并且单次可生成视频长度达180秒,
打开 SkyReels 网页,立刻感到「AI 短剧」与其他 「 AI 创意」平台的设计,很不一样。
只要输入一个概念或故事创意,点击「创作类型」, 比如情感剧,系统会自动生成一份符合要求的剧本,结构完整、情节丰富。
看下面的效果图:
制作视频一气呵成!
与传统的视频生成相比,WorldEngine在成本上实现了革命性地下降,可大幅降低百倍以上。同时,生成速度也提升了数个量级。
不过这次发布,也确实带来了很多的亮点:
1、全自动化生成剧本
用户输入概念或创意,AI将一键生成一份结构完整、情节丰富的剧本,并支持已有剧本的自动整理与润色
当然创意我们也可以通GPT等其他大模型进行生成,不过SkyReels AI效果支持了
2、情节设计
AI 将根据剧本内容,自动生成一系列分镜图,每个分镜图都包含了镜头的角度、角色的位置和动作。创作者可以根据自己的喜好调整这些分镜,比如改变镜头的角度或者增加特定的动作,以更好地传达故事的情感。
个性化定制
创作者可以选择不同的视觉风格,比如动漫、卡通或真人 3D,来呈现他们的短剧。SkyReels 提供了多种角色形象和音色的选择,创作者可以根据自己的故事和目标受众来定制角色的外观和声音
还可以一键生成一系列分镜图,每个分镜图都包含了镜头的角度、角色的位置和动作
SkyReels不仅能够自动生成剧本,还支持用户根据需要调整剧本内容,通过StoryboardGen,用户可以定制化分镜效果,Sky3DGen则负责生成3D场景和角色,WorldEngine确保了整个创作流程的流畅性和高效性。
让我更加震撼的就是SkyScript AI都是自研技术集成的:
剧本大模型SkyScript、
分镜大模型StoryboardGen、
3D生成大模型Sky3DGen,
WorldEngine——业界首个将AI 3D引擎与视频大模型深度融合的创新平台。其次算法团队设计了渐进式生成的剧本生成框架,实现了模型能够输出高度结构化的精彩剧本,无论是新手作者还是资深剧作家,都能通过它激发创意,轻松创作出引人入胜的短剧剧本。
在使用 SkyReels 平台时,创作者输入剧本后,平台的 StoryboardGen 模型会自动将剧本内容分解成两个主要部分:全局描述和主体定制。全局描述包括场景设定、景别选择和构图设计等元素,这些是对分镜的整体指导。而主体定制则涉及角色形象、动作和人物角色的具体细节。
通过这种方式,StoryboardGen 能够生成一个完整的分镜故事板。
StoryboardGen的专项多智能体架构,能够有效保证人物与场景的可控性和一致性,创造出高质量的工业级分镜。
我们来看一下剧本大模型质量评估:
看到没,SkyReels在整个视频生成中目前在国内是非常靠前的,并且都是由 AI 驱动,但「 AI 创意」平台以图片、视频生成为主,SkyReels 则集剧本生成、角色定制、分镜设计、视频拍摄与合成于一体, 完整复制了短剧工业化流程。
昆仑万维的AI短剧平台SkyReels的推出,标志着全球AI短剧创作领域的一次技术革命。这一创新将简化并加速视频内容的制作流程,使创作者能够专注于创意和灵感的表达,不再受繁琐、复杂的传统制作步骤的束缚。
通过AI技术,“一人一剧”的梦想,即将成为现实!
计算机专业必读书籍:
最后说一句(别白嫖,求关注)
回复 【idea激活】即可获得idea的激活方式
回复 【Java】获取java相关的视频教程和资料
回复 【SpringCloud】获取SpringCloud相关多的学习资料
回复 【python】获取全套0基础Python知识手册
回复 【2020】获取2020java相关面试题教程
回复 【加群】即可加入终端研发部相关的技术交流群
阅读更多
重磅!OpenAI正研发ChatGPT文本水印技术,其他大模型将何去何从?
相信自己,没有做不到的,只有想不到的
在这里获得的不仅仅是技术!
喜欢就给个“在看”