Amica 与 Ollama:语音识别与3D渲染结合的AI聊天助手 - 本地安装

科技   2024-09-13 19:49   湖南  

🍹 Insight Daily 🪺

Aitrainee | 公众号:AI进修生

Hi,这里是Aitrainee,欢迎阅读本期新文章。

很高兴的和大家分享一个新东西—Amica,它是一个 个人AI聊天机器人,可以通过语音或文本在你的本地系统上与3D角色互动。

这个应用程序主要允许你在自己的浏览器中轻松与3D角色对话,我稍后会展示如何在本地安装它。你还可以导入VRM文件,调整语音以匹配角色,甚至生成包含情感表达的回复文本。

因为它在Ollama上运行,所以你可以私下在本地聊天,你还可以进行角色扮演,满足你的幻想,想象空间几乎是无限的。

Amica不仅仅让你聊天,它在后台做3D渲染,展示3D角色,还能在浏览器中运行Transformer它还使用Whisper进行语音识别,能做很多事情。

我还会把它与Ollama集成,所以我们今天做本地部署。

对了,你也可以不用本地部署,这是它的体验地址:https://amica.arbius.ai/(唯一的问题是,他的回复会很慢、卡顿,而我们本地部署就会流畅很多)

运行`ollama pull llama3.1`下载它,因为它的响应质量非常好,而且我只需要文本模型,其他部分由Amica处理。

下载完成,文件校验中,不会花太久。Ollama模型已准备好。

接下来,我要创建一个虚拟环境,这不是必须的,但我喜欢将它与我的本地安装分开。

环境创建完成后,我们克隆Amica的仓库。

在开始之前,你需要确保已经安装了最新版本的Node.js和npm。如果还没安装,你可以在我频道里找到详细的安装教程。运行`npm install`安装所有依赖包,

完成后运行`npm run dev`构建项目并启动。

访问本地的localhost:3000,可以看到Amica已启动。

你可以选择与她通过文本聊天,或者按下麦克风按钮进行语音对话。

让我示范一下,我输入“嘿,你是谁?” Amica回复说:“你好,我是Amica,今天有什么我可以帮助你的吗?” 我接着说:“我今天感觉很累,应该怎么办?” 她建议我休息放松,以恢复精力。然后我又问她:“你能为我唱一首轻松的歌吗?” 她回复了《Over the Rainbow》的链接。

接下来,我按下麦克风,问她:“你是做什么工作的?” 她回答:“我是软件工程师,喜欢用技术创造新事物。你呢?” 。。。

总的来说,这个项目真的很酷。试试Amica,看看你的体验如何。你还可以使用API。

🌟希望这篇文章对你有帮助,感谢阅读!如果你喜欢这系列文章请以 点赞 / 分享 / 在看 的方式告诉我,以便我用来评估创作方向。


往期推荐



KAN 2.0:MIT 的 “ AI炼金术 ” 能否让科学发现像刷抖音一样快?

升级Ollama!MiniCPM-V2_6图像识别模型上线,适用于手机上单张图片、多张图片和视频的 GPT-4V 级 MLLM

VSCode+Aider+Supermaven:打造免费开源的顶级AI开发环境,别再为Cursor花钱了!

每日AI 9/10:DeepSeek-Coder再进化!音频驱动Loopy、KubeAI Kubernetes 上私有化AI部署

Dark Idol Llama-3.1 8B:最强角色扮演AI,未审查版助你尽情创作、不受限制的互动体验

参考链接:
[1] github:https://github.com/khoj-ai/khoj

[3] video:https://www.youtube.com/watch?v=KtkfHbC32QY

知音难求,自我修炼亦艰

抓住前沿技术的机遇,与我们一起成为创新的超级个体

(把握AIGC时代的个人力量)

点这里👇关注我,记得标星哦~

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见 ~ 

AI进修生
AI算法工程师 / Prompt工程师 / ROS机器人开发者 | 分享AI动态与算法应用资讯,提升技术效率。
 最新文章