AI数字人:产品经理

教育   2024-10-20 21:14   四川  

先看看效果

AI数字人】目前能够实现主要做2个事情,一个是口播,一个是跳舞。商业化的数据人平台,可以看百度,基本上做到了行业很高水平。

另外还有一些针对个人玩具类型的数字人

【克隆数字人】

如何实现自己的数字人呢,你首先需要上传自己的视频+声音,让数字人自己学习,学习好了以后,你的分省就可以像你一样,跟你对话,而且通过提示词,都可以让你的分身有某种性格和角色定位。

还需要上传你的声音,录制教程,找一个安静的地方,没有杂音、噪音、回声和混响。请用麦克风在线录制一段你单人说话的音频,录制时麦克风要离嘴巴大约10厘米。录音需要用普通话,尽量不要有方言、英文或字母哦。录制时的语气和语速也会被克隆,请按照期望的效果进行录制哟,还有还有,音频时长不能少于10秒哟。

【口播技术框架】

数字人是如何构成的,对话系统生成的文字或者你提前准备的文案+合成语音 + 人头像图片 + 对口型+肢体动作》口播视频(下图右边的技术框架带有红旗的,就是推荐的方法)

数字人互动直播与录播有点类似,只是录播少了互动。在录播时会先把视频录制好,然后通过OBS推流,推到直播平台就可以了。这只是个人的理解,没搞过直播,也是不是这行业的,就先按照这个思路搞。如果需要互动流程时,要获取直播弹幕,判断弹幕是否满足回答条件,如果需要回答则生成答案,然后在走一遍视频制作流程,然后推流。

【照片跳舞实现方式】

comfyui,把美女跳舞视频的关键点动作提取出来给到照片

照片+别人跳舞视频=照片跳舞视频

【AI直播】

通过obs把你的电脑输出内容,输出到新媒体直播平台

就是把你(电脑桌面+电脑声音)推流到自媒体平台,你自己电脑桌面上有什么东西,都可以推过去。最后有粉丝给你互动和留言,你都可以通过AI的方式去回答粉丝的互动。用到3种软件,一个是生成内容的,直播平台的,一个是obs链接组合的。

OBS Studio:是一款视频直播录制软件,为用户提供了视频、文本、图像等的捕获录制功能。下载专业版本的OBS以在Windows上简单且快速的开始串流。

直播伴侣:这个是pc端的直播软件,和手机端的直播不一样

生成跳舞主播:甚至感觉和AI没有啥关系呀,就是用户回复一个语音或者刷礼物后台捕捉到以后,给看直播的人放一个视频+声音,实际上就是后台设定了一个逻辑后台几个视频,大概有10段视频+10个音乐,不断重复循环给用户播放,这个和AI没有任何关系。

生成口播主播,他的声音合成和虚拟人物是有调用第三方的API,这个软件只是一个应用端。

这个和之前B站很流行的AI杠精一样,只是AI杠精的头像是一个熊猫。

并不是需要有特定的系统才可以,你们所有见到的AI聊天大模型,只要你让他给自己设置一个角色,他都可以以这个角色跟你聊天。你可以让他 做杠精、你的女朋友、心理医生、老师、护士 等所有角色。如果通过这个接口调用,你就可以在B站上和所有用户抬杠了。



数据产品之美
基金分析,LOF基金套利,基金实时估值
 最新文章