写在前面
AI视频创作工具的兴起,如Runway、Pika、MJ、SD+AnimateDiff、ComfyUI、SVD等,为自媒体运营者提供了前所未有的便利。通过这些工具,即使是没有专业视频制作背景的个人或团队,也能够快速创作出高质量的MV视频,从而提高观众的参与度和粉丝的忠诚度。
下面,我们就来详细了解一下利用Suno创作音乐,并快速创作MV视频的技术工作流。
一、技术拆解
1、AI 作图
• Midjourney(国外版):生成图片效果最好,地址:https://www.midjourney.com/
• Midjourney(国内版):无需翻墙,效果与国外版一样,地址:https://ai.midjourney9.com/?channel=0519116
• Stable Diffusion:需自己部署,可使用秋叶大佬的整合包
• ComfyUI:可自己部署构建工作流
• ChatGPT4:生成图片效果不如MJ,地址:https://openai.com/gpt-4
• 其他
2、AI 生成音乐
• Suno:https://suno.com/
3、AI 生成视频
• Runway:https://app.runwayml.com/
• Pika:https://pika.art/
• PixVerse:https://www.pixverse.io/
4、视频后期剪辑
• 剪映电脑版
二、制作流程
2.1 Midjourney快速绘图
这里我推荐使用国内版Midjourney(https://ai.midjourney9.com/?channel=0519116),其底层模型就是用的官方版本,且平台封装了更多功能,支持Pika视频生成等。针对新用户,会赠送免费体验积分。
1. 确定要绘画的主题
比如国风、动漫、二次元、头像、3D、艺术等。
2. 登录平台,注册账号,来到灵感广场
3. 以“国风”为主题,浏览灵感广场的相似作品,或直接搜索关键词
选择相似主题,借鉴其提示词,并且可以再形成自己的风格!
4. 点击“画同款”,可以快速帮我们生成一张类似图片作品
5. 跳转到文生图工作台(可二次优化提示词)
6. 点击提交任务
快图模式:4积分/张图;
常规模式:1积分/张图
2.2 图生视频
选择工具
视频生成的工具选择就非常多了,可以都尝试一下!每个平台都有自己的特点和强项,比如Runway、Pika、SVD、PixVerse等。这里推荐几篇文章,可以快速了解和上手视频生成工具!
这里以Pika为例,快速图生视频
其中第二步非必须!!
2.3 AI音乐生成
这里我们选择强大的Suno工具来生成美妙的音乐!!
地址:https://www.suno.ai/
1、简介
Suno AI,被誉为音乐界的ChatGPT,是一款革命性的AI驱动歌曲生成器。它能够根据简单的提示,创造出从歌词到人声和配器的完整音乐作品。无论你是音乐新手还是资深爱好者,Suno AI都能帮你轻松创作出个性化的音乐。
2、账号要求
需要拥有Discord、谷歌或微软中的至少一个账号。确保你的网络环境稳定,以便顺利使用该平台。
3、订阅信息
• 免费用户,Suno为免费用户提供每天50积分,每首歌消耗5积分,因此每天可以创作10首歌曲,但是每次点击生成都会生成两首歌曲。如果你有多个账号,可以白来创作更多的音乐作品。
• Pro 用户,每个月2500点数(大约500首歌): 按月来算每个月10美元,按年来的话,每个月8美元,每年96美元。
• Premier 用户,每个月10000点数(大约2000首歌):按月来算每个月30美元,按年来的话,每个月24美元,每年288美元。
4、点击Create
这里有两种模式:
• 默认模式
1 关闭个性化
2 歌曲描述: 可以写大概歌词是什么样子的,也可以写曲风是什么样的
3 乐器开关
4 模型选择v3
• 个性化模式
1. 开启个性化定制
2. 填写歌词,也可以点下面按钮创建随机歌词
3. 曲风, 可以输入温柔的男声,甜美的女声等
4. 标题,设置自己喜欢的就好
5、生成歌词
当然我们也可以使用大模型来帮我们生成,比如Kimi、GPT、文心一言等。
这里给出一段刘一手大佬的一段提示词可供借鉴:
音乐助手提示词:
欢迎使用音乐助手,让我们一起创作美妙的音乐吧!
步骤 1:选择主题
请告诉我你心中的主题,它可以是爱情、友情、梦想、旅行、自然等任何激发你灵感的事物。
步骤 2:生成歌词
根据你提供的主题,音乐助手将为你生成一段主歌和副歌的歌词。请耐心等待,美妙的文字即将呈现。
步骤 3:音乐风格的选择
在歌词创作完成后,我们将根据主题和歌词内容推荐几种音乐风格。你可以选择一种风格,或者告诉我们你的偏好,我们将为你定制音乐。
现在,请分享你的主题,让我们开始这段音乐创作之旅!
主题是:回家
6、开始生成
在我们填写好所需内容后,点击Create,等待大概2-3分钟,即可畅听优美的旋律!!!
7、下载
2.4 剪辑
利用剪映软件进行成片制作!
成片展示
技术交流
1、加入AIGCmagic社区知识星球
AIGCmagic社区知识星球不同于市面上其他的AI知识星球,AIGCmagic社区知识星球是国内首个以AIGC全栈技术与商业变现为主线的学习交流平台,涉及AI绘画、AI视频、ChatGPT等大模型、AI多模态、数字人、全行业AIGC赋能等50+应用方向,内部包含海量学习资源、专业问答、前沿资讯、内推招聘、AIGC模型、AIGC数据集和源码等。
那该如何加入星球呢?很简单,我们只需要扫下方的二维码即可。知识星球原价:299元/年,前200名限量活动价,终身优惠只需199元/年。大家只需要扫描下面的星球优惠卷即可享受初始居民的最大优惠:
2、Stable Diffusion XL核心基础知识,从0到1搭建使用Stable Diffusion XL进行AI绘画,从0到1上手使用Stable Diffusion XL训练自己的AI绘画模型,AI绘画领域的未来发展等全维度解析文章正式发布
码字不易,欢迎大家多多点赞:
Stable Diffusion XL文章地址:https://zhuanlan.zhihu.com/p/643420260
3、Stable DiffusionV1-V2核心原理,核心基础知识,网络结构,经典应用场景,从0到1搭建使用Stable Diffusion进行AI绘画,从0到1上手使用Stable Diffusion训练自己的AI绘画模型,Stable Diffusion性能优化等全维度解析文章正式发布
码字不易,欢迎大家多多点赞:
Stable Diffusion文章地址:https://zhuanlan.zhihu.com/p/632809634
4、ControlNet核心基础知识,核心网络结构,从0到1使用ControlNet进行AI绘画,从0到1上手构建ControlNet高级应用等全维度解析文章正式发布
码字不易,欢迎大家多多点赞:
ControlNet文章地址:https://zhuanlan.zhihu.com/p/660924126
5、LoRA系列模型核心基础知识,从0到1使用LoRA模型进行AI绘画,从0到1上手训练自己的LoRA模型,LoRA变体模型介绍,优质LoRA推荐等全维度解析文章正式发布
码字不易,欢迎大家多多点赞:
LoRA文章地址:https://zhuanlan.zhihu.com/p/639229126
6、最全面的AIGC面经《手把手教你成为AIGC算法工程师,斩获AIGC算法offer!(2024年版)》文章正式发布
码字不易,欢迎大家多多点赞:
AIGC面经文章地址:https://zhuanlan.zhihu.com/p/651076114
7、10万字大汇总《“三年面试五年模拟”之算法工程师的求职面试“独孤九剑”秘籍》文章正式发布
码字不易,欢迎大家多多点赞:
算法工程师三年面试五年模拟文章地址:https://zhuanlan.zhihu.com/p/545374303
《三年面试五年模拟》github项目地址(希望大家能给个star):https://github.com/WeThinkIn/Interview-for-Algorithm-Engineer
8、Stable Diffusion WebUI、ComfyUI、Fooocus三大主流AI绘画框架核心知识,从0到1搭建AI绘画框架,从0到1使用AI绘画框架的保姆级教程,深入浅出介绍AI绘画框架的各模块功能,深入浅出介绍AI绘画框架的高阶用法等全维度解析文章正式发布
码字不易,欢迎大家多多点赞:
AI绘画框架文章地址:https://zhuanlan.zhihu.com/p/673439761
9、其他
Rocky将YOLOv1-v7全系列大解析文章也制作成相应的pdf版本,大家可以关注公众号WeThinkIn,并在后台 【精华干货】菜单或者回复关键词“YOLO” 进行取用。