开源的3D互动数字人聊天,你的二次元AI助理

文摘   科技   2024-10-02 12:09   北京  

开源的3D互动数字人聊天,你的二次元AI助理吗点击上方蓝字关注我们

IT 咖啡馆,探索无限可能!

恭喜你发现了这个宝藏,这里你会发现优质的开源项目、IT知识和有趣的内容。

 

现在的AI对话系统很多,但是使用的时候有没有觉得有点枯燥,想不想要来一个数字人陪聊?

今天我们分享的开源项目,它是一个AI数字人聊天陪伴系统,界面美观还可以支持3D互动,它就是:lobe-vidol




lobe-vidol 是什么



LobeHub 团队出品的一个可以跟虚拟人聊天,甚至跟 3D 模型互动的工具。它具有精美的 UI 设计,支持MMD 舞蹈并进行流畅的对话,让你体验虚拟偶像在旁边陪着聊天的魔力。

lobe-vidol 项目还是很新的,目前处于开发初期,现已开放 Beta 测试。项目的特点包括:

1.🗣️流畅的通话体验

流畅的响应确保顺畅的对话体验。它完全支持 Markdown 渲染,包括代码高亮、LaTex 公式等。

2. 💎精致的 UI 设计

界面设计精良,外观优雅,交互流畅,支持明暗主题,PWA支持,体验更原生;

3. 💨 Vroid 模型预览

使用Vroid编辑器,您可以创建自己的虚拟偶像并上传到网站,与它们一起玩;

4. 🎇 MMD 舞蹈支持

在mmd-parser的支持下,您可以与您最喜欢的偶像一起播放vmd文件;尽情跳舞吧!




安装和使用


 

项目有一个在线环境,可以直接在上面先试用体验。https://vidol.lobehub.com/chat

但是使用的时候需要绑定OpenAI的key,大家自己权衡一下。或者为了安全建个临时key用一下。 

本地启动

 

你可以将项目下载到本地,然后启动。

$ git clone <https://github.com/lobehub/lobe-vidol.git>$ cd lobe-vidol$ bun install$ bun dev

项目整体使用了lobehub的技术栈,包括@lobehub/ui ,@lobehub/icon,@lobehub/tts和@lobehub/lint。

另外还有几个关联的示例项目:

  • Vidol market - Vidol的市场

  • Vidol agent sample - Vidol人物数据模版

  • Vidol dance sample - Vidol舞蹈数据模版

 

聊天

 

这里是就和LobeChat的使用差不多,主要还是一个AI聊天的界面,你的数字人助理会在旁边陪伴,使用体验确实拉满。

目前支持的是OpenAI的模型使用,使用时需要绑定API key,如果是在线环境需要自己来斟酌关于绑key的问题。

 

角色

 

可以在这里配置自己的虚拟角色,可以配置大模型相关的提示词,以及设置角色、语音和角色的触摸动作。

还可以将自己的配置角色分享出去。

 

发现

 

在发现里,可以找到一些预设好的虚拟角色。

下载后可以打开新的聊天来使用这个角色。




总结



整体来说lobe-vidol的使用界面真的很漂亮,这比很多数字人项目简陋的操作界面要强太多。当然它实际是一个聊天陪伴系统,和数字人的使用上有些差异。我觉得作者的思路很直接借鉴,而且二次元的风格很喜欢。

   




项目信息


    • 项目名称:lobe-vidol

    • GitHub 链接:https://github.com/lobehub/lobe-vidol/

    • Star 数:1K




往期推荐

8K star X2!anthropics 开源的AI学习资源,27份指南+5个课程

8K star!互动式学习,0基础入门CUDA

「Github一周热点42期」AirDrop替代、计算机视觉工具、llama开发框架等5个项目

  




识别二维码关注我们
微信号- it-coffee
B站 - IT-咖啡馆
头条号- IT咖啡馆

IT咖啡馆
开源项目、IT技能和有趣的事情
 最新文章