AIGC | 「视频生成」系列之Suno制作MV视频工作流分享(保姆级)

文摘   2024-07-09 12:03   浙江  

写在前面

AI视频创作工具的兴起,如Runway、Pika、MJ、SD+AnimateDiff、ComfyUI、SVD等,为自媒体运营者提供了前所未有的便利。通过这些工具,即使是没有专业视频制作背景的个人或团队,也能够快速创作出高质量的MV视频,从而提高观众的参与度和粉丝的忠诚度。

下面,我们就来详细了解一下利用Suno创作音乐,并快速创作MV视频的技术工作流。

一、技术拆解

1、AI 作图

  • • Midjourney(国外版):生成图片效果最好,地址:https://www.midjourney.com/

  • • Midjourney(国内版):无需翻墙,效果与国外版一样,地址:https://ai.midjourney9.com/?channel=0519116

  • • Stable Diffusion:需自己部署,可使用秋叶大佬的整合包

  • • ComfyUI:可自己部署构建工作流

  • • ChatGPT4:生成图片效果不如MJ,地址:https://openai.com/gpt-4

  • • 其他

2、AI 生成音乐

  • • Suno:https://suno.com/

3、AI 生成视频

  • • Runway:https://app.runwayml.com/

  • • Pika:https://pika.art/

  • • PixVerse:https://www.pixverse.io/

4、视频后期剪辑

  • • 剪映电脑版

二、制作流程

2.1 Midjourney快速绘图

这里我推荐使用国内版Midjourney(https://ai.midjourney9.com/?channel=0519116),其底层模型就是用的官方版本,且平台封装了更多功能,支持Pika视频生成等。针对新用户,会赠送免费体验积分。

1. 确定要绘画的主题

比如国风、动漫、二次元、头像、3D、艺术等。

2. 登录平台,注册账号,来到灵感广场

3. 以“国风”为主题,浏览灵感广场的相似作品,或直接搜索关键词

选择相似主题,借鉴其提示词,并且可以再形成自己的风格!

4. 点击“画同款”,可以快速帮我们生成一张类似图片作品

5. 跳转到文生图工作台(可二次优化提示词)

6. 点击提交任务

快图模式:4积分/张图;

常规模式:1积分/张图

2.2 图生视频

选择工具

视频生成的工具选择就非常多了,可以都尝试一下!每个平台都有自己的特点和强项,比如Runway、Pika、SVD、PixVerse等。这里推荐几篇文章,可以快速了解和上手视频生成工具!

这里以Pika为例,快速图生视频

其中第二步非必须!!

2.3 AI音乐生成

这里我们选择强大的Suno工具来生成美妙的音乐!!

地址:https://www.suno.ai/

1、简介

Suno AI,被誉为音乐界的ChatGPT,是一款革命性的AI驱动歌曲生成器。它能够根据简单的提示,创造出从歌词到人声和配器的完整音乐作品。无论你是音乐新手还是资深爱好者,Suno AI都能帮你轻松创作出个性化的音乐。

2、账号要求

需要拥有Discord、谷歌或微软中的至少一个账号。确保你的网络环境稳定,以便顺利使用该平台。

3、订阅信息

  • • 免费用户,Suno为免费用户提供每天50积分,每首歌消耗5积分,因此每天可以创作10首歌曲,但是每次点击生成都会生成两首歌曲。如果你有多个账号,可以白来创作更多的音乐作品。

  • • Pro 用户,每个月2500点数(大约500首歌): 按月来算每个月10美元,按年来的话,每个月8美元,每年96美元。

  • • Premier 用户,每个月10000点数(大约2000首歌):按月来算每个月30美元,按年来的话,每个月24美元,每年288美元。

4、点击Create

这里有两种模式:

  • • 默认模式

1 关闭个性化

2 歌曲描述: 可以写大概歌词是什么样子的,也可以写曲风是什么样的

3 乐器开关

4 模型选择v3

  • • 个性化模式

  1. 1. 开启个性化定制

  2. 2. 填写歌词,也可以点下面按钮创建随机歌词

  3. 3. 曲风, 可以输入温柔的男声,甜美的女声等

  4. 4. 标题,设置自己喜欢的就好

5、生成歌词

当然我们也可以使用大模型来帮我们生成,比如Kimi、GPT、文心一言等。

这里给出一段刘一手大佬的一段提示词可供借鉴:

音乐助手提示词:

欢迎使用音乐助手,让我们一起创作美妙的音乐吧!

步骤 1:选择主题

请告诉我你心中的主题,它可以是爱情、友情、梦想、旅行、自然等任何激发你灵感的事物。

步骤 2:生成歌词

根据你提供的主题,音乐助手将为你生成一段主歌和副歌的歌词。请耐心等待,美妙的文字即将呈现。

步骤 3:音乐风格的选择

在歌词创作完成后,我们将根据主题和歌词内容推荐几种音乐风格。你可以选择一种风格,或者告诉我们你的偏好,我们将为你定制音乐。

现在,请分享你的主题,让我们开始这段音乐创作之旅!


主题是:回家

6、开始生成

在我们填写好所需内容后,点击Create,等待大概2-3分钟,即可畅听优美的旋律!!!

7、下载

2.4 剪辑

利用剪映软件进行成片制作!

成片展示

技术交流

1、加入AIGCmagic社区知识星球

AIGCmagic社区知识星球不同于市面上其他的AI知识星球,AIGCmagic社区知识星球是国内首个以AIGC全栈技术与商业变现为主线的学习交流平台,涉及AI绘画、AI视频、ChatGPT等大模型、AI多模态、数字人、全行业AIGC赋能等50+应用方向,内部包含海量学习资源、专业问答、前沿资讯、内推招聘、AIGC模型、AIGC数据集和源码等

那该如何加入星球呢?很简单,我们只需要扫下方的二维码即可。知识星球原价:299元/年,前200名限量活动价,终身优惠只需199元/年。大家只需要扫描下面的星球优惠卷即可享受初始居民的最大优惠:

2、Stable Diffusion XL核心基础知识,从0到1搭建使用Stable Diffusion XL进行AI绘画,从0到1上手使用Stable Diffusion XL训练自己的AI绘画模型,AI绘画领域的未来发展等全维度解析文章正式发布

码字不易,欢迎大家多多点赞:

Stable Diffusion XL文章地址:https://zhuanlan.zhihu.com/p/643420260

3、Stable DiffusionV1-V2核心原理,核心基础知识,网络结构,经典应用场景,从0到1搭建使用Stable Diffusion进行AI绘画,从0到1上手使用Stable Diffusion训练自己的AI绘画模型,Stable Diffusion性能优化等全维度解析文章正式发布

码字不易,欢迎大家多多点赞:

Stable Diffusion文章地址:https://zhuanlan.zhihu.com/p/632809634

4、ControlNet核心基础知识,核心网络结构,从0到1使用ControlNet进行AI绘画,从0到1上手构建ControlNet高级应用等全维度解析文章正式发布

码字不易,欢迎大家多多点赞:

ControlNet文章地址:https://zhuanlan.zhihu.com/p/660924126

5、LoRA系列模型核心基础知识,从0到1使用LoRA模型进行AI绘画,从0到1上手训练自己的LoRA模型,LoRA变体模型介绍,优质LoRA推荐等全维度解析文章正式发布

码字不易,欢迎大家多多点赞:

LoRA文章地址:https://zhuanlan.zhihu.com/p/639229126

6、最全面的AIGC面经《手把手教你成为AIGC算法工程师,斩获AIGC算法offer!(2024年版)》文章正式发布

码字不易,欢迎大家多多点赞:

AIGC面经文章地址:https://zhuanlan.zhihu.com/p/651076114

7、10万字大汇总《“三年面试五年模拟”之算法工程师的求职面试“独孤九剑”秘籍》文章正式发布

码字不易,欢迎大家多多点赞:

算法工程师三年面试五年模拟文章地址:https://zhuanlan.zhihu.com/p/545374303

《三年面试五年模拟》github项目地址(希望大家能给个star):https://github.com/WeThinkIn/Interview-for-Algorithm-Engineer

8、Stable Diffusion WebUI、ComfyUI、Fooocus三大主流AI绘画框架核心知识,从0到1搭建AI绘画框架,从0到1使用AI绘画框架的保姆级教程,深入浅出介绍AI绘画框架的各模块功能,深入浅出介绍AI绘画框架的高阶用法等全维度解析文章正式发布

码字不易,欢迎大家多多点赞:

AI绘画框架文章地址:https://zhuanlan.zhihu.com/p/673439761

9、其他

Rocky将YOLOv1-v7全系列大解析文章也制作成相应的pdf版本,大家可以关注公众号WeThinkIn,并在后台 【精华干货】菜单或者回复关键词“YOLO” 进行取用。

WeThinkIn
Rocky相信人工智能,数据科学,商业逻辑,金融工具,终身成长,以及顺应时代的潮流会赋予我们超能力。
 最新文章