效果一流还免费?这个力压Sora的中国AI出语音克隆了

科技   2024-12-15 23:02   四川  
           关注本公众号,即得《搞钱副业精选项目》大全

鲁迅先生说:没有声音,再好的戏也出不来!

不信,看看下面这个视频

美女进了你的眼,但可能没进你的心

再看下面这个,配了段怀旧金曲,是不是感觉一下就来了?

这就是声音的魅力

前段时间做了个奇妙的海洋生物视频,全 AI 做的,声音是 fish 克隆的

有小伙伴看了,对我说:真好

我说:动物很神奇?

小伙伴:又听到赵老师的感觉真好,一下就上头了

今天,我们就来聊聊语音克隆

之前介绍过不少语音 AI,包括 chattts、fish AI、seed-tts、F5、elevenlabs、睿声科技,点这里看《语音克隆文章集锦》

再给大家介绍一个新伙计!

说是新人,其实是 AI 届老司机

它就是已在全球视频大杀四方的海螺 AI,Minimax 公司出品

目前全球 AI 视频领域口碑第一

前两天打开海螺海外版 

发现了一个 “Audio”

开始没在意,因为国内版有个“音乐”,以为是镜像翻译问题

昨天无意点进去,发现不是音乐,居然是语音克隆+语音合成!

赶紧试了试,效果不错

随手克隆了一个,然后输入了一段卖场口播话术进去,大家听听

看看视频

下面讲讲操作

先登录海螺海外版,目前暂时仅有海外版可以使用

hailuoai.video

为了方便英语不熟练的同学,我打开沉浸式翻译双语模式

进去后有两个栏目,Voices 是音色库

Text to Speech 则是输入文本,选择音色,生成语音

我们先来克隆一下,进入 Voices 频道

有很多公共音色,可以克隆自己的音色

可以无限制克隆,但是只有三个插槽,仅能同时保存三个专属音色。好在生成的历史记录,即使你删除了你的某一个专属音色,历史记录还是可以保留

点击进入“create your vocie clone”

输入音色名称、上传语音或录制语音

号称 10 秒可以完成克隆,我反复测试,60 秒的原音效果还是最好的

选择是否自动去除原音杂声,原语音的语言,勾选版权承诺

点击克隆,大概 10 多秒即完成

然后我们进入“Text to Speech”频道使用这个音色

界面如下

先录入文字,文字可以使用" <#0.5#>"来增加间隔,注意 0.5 代表停顿时间,可以改为任意数字

一次可以生成 1 万字的语音!良心!比较好用的 fish 免费版一次只支持 500 字!

我们输入“四川美食以辣著称,是中国八大菜系之一,以其麻辣风味闻名。四川人对辣的热爱体现在他们的饮食文化中,以下是一些四川美食的例子:麻婆豆腐 :以麻辣鲜香、豆腐嫩滑而著称,是川菜中的经典之作。回锅肉 :以猪后臀肉、青椒、蒜苗等原料烹饪,色泽红亮,肥而不腻。”

设置界面如下:

设置项包括:

  • 生成语种
  • 语速
  • 情感(自动、悲伤、欢乐、愤怒、厌恶、惊讶、平常)
  • 声音强度
  • 音高
  • 鼻音强度
  • 特效(电话、礼堂、机器人等)

最有用的是语速和情感!

美食介绍我们选择情感为欢乐

生成如下音频

我用同样的材料,用fish克隆了一个

大家听听,个人觉得,fish还原度略高

得到语音后,你可以根据需求使用语音,比如视频对嘴型

我结合了 几个对嘴型AI软件,制作了以下视频:

测试总结:

对比了 海螺语音 与 Fish 两款语音克隆工具的表现,海螺语音的声音还原度略逊色于 Fish,但它的优势却不容忽视

  • 完全免费,一次性生成最多 1 万字的语音,而 Fish 的免费额度仅为 500 字。
  • 功能设置更丰富,用户可以根据个人需求精细调节语音效果,打造更符合自己要求的声音。

通过这种方式,语音克隆和视频 AI 的结合大大拓展了应用场景。尤其在数字人领域,这一技术有着广阔的前景,包括:

数字人:将语音克隆与视频 AI 结合,为数字人和虚拟主播打造个性化声音,提升互动性。

视频博主:博主通过语音克隆,只需文字内容,AI 即可代替发声,快速高效地完成内容创作。

虚拟角色配音:为游戏角色或虚拟偶像定制专属声音,增强用户互动与沉浸感。

跨语言转换:支持多语言,迅速将语音转换为不同语言,拓展国际市场,突破语言障碍。

个性化声音克隆:可以克隆任何理想中的声音,开启创作的无限可能。

个性化语音助手:让语音助手具备“自己”的声音,实现更个性化的用户体验。

回顾过去的一个月,中国AI的表现,猛然间发现,中国 AI 已经全面崛起!

国产 AIGC 的“七巧板”,终于要拼齐了

视频 AI 领域,前两天 Sora 发布,没想到国外网友一用之下感叹,还是海螺、可灵好用

图片领域,字节即梦刚出的 2.1 模型,基本解决了 AI 做图的中文

语音领域:之前全球公认第一的 eleven labs 英文克隆强到没有朋友,但说中文总有股牛排味

chattts、F5 配置起来也比较麻烦

但随着 fish,尤其是海螺语音 AI 的推出,木桶上的最后一块短板被补齐了!

放到两年前,国产AI免费都没人用,狗都不理!

过去两年,我和大家见证了国产AI的崛起,未来,我将和大家一起见证国产AI的全面辉煌

中国 AI,必将崛起!

想系统学习 AI 做视频 的小伙伴可以加入“手把手教你用AI做视频赚钱”

原价 299,买断优惠推广价 19 元!

每增加 100 人上涨 10 元,即将到下一次涨价点

想系统学习的小伙伴赶快上车!扫描下图二维码或点击“阅读原文”可达


AI变现研习社
AI在手中,成功在脚下
 最新文章