这个开源的 SDK 能让小型硬件设备（比如 ESP32 这样的微控制器）轻松接入 OpenAI 的实时语音服务，同时还能通过 WiFi 与云端的 AI 模型即时交互。当然，它也能在 Linux 系统上跑起来，让你随时随地和设备进行实时对话。意思是，给你的玩具、家电或任何小物件装上这套方案，只要几行简单代码，你的毛绒玩具、眼镜，甚至家里的任何一个小物件，都能通过这块芯片和几行简单的代码，摇身一变，成为你的贴心小助手！总之，我的奥特曼玩具未来马上就可以和我交流了！！OpenAI 带货能力也真牛！最近在淘宝上，ESP32 的零件和配件价格涨得飞快，好多东西都买不到了。比如，以前只要 2 块钱的音频解码芯片，现在 10 个起卖，价格最高能到 9 块钱一个。。。。不光是芯片，连带的音频放大器和麦克风这些配件价格也都都偷偷涨价。再说回这个 SDK，Realtime Embedded SDK 提供了全套工具链支持，包括安装、构建和部署等各个环节，大幅简化了将 AI 功能引入微型设备的过程。只需完成 WiFi 配置 和 OpenAI API 密钥 设置，便能让设备即时接入云端 AI。在使用这款 SDK 时，开发者只需：
安装必要的依赖（如 protobufc）；
使用 set-target 命令指定目标平台（例如 ESP32S3 或 Linux）；
配置 WiFi 和 OpenAI API 密钥；
最后进行构建和部署。
通过简单的安装步骤，就可以开始语音交互了 ～
protoc must be in your path with protobufc installed. Call set-target with the platform you are targetting. Today only linux and esp32s3 are supported. idf.py set-target esp32s3 Configure device specific settings. None needed at this time idf.py menuconfig Set your Wifi SSID + Password as env variables export WIFI_SSID=foo export WIFI_PASSWORD=bar export OPENAI_API_KEY=bing Build idf.py build If you built for esp32s3 run the following to flash to the device sudo -E idf.py flash If you built for linux you can run the binary directly ./build/src.elf See <u>build.yaml</u> for a Docker command to do this all in one step.
奶茶发现网友们已经动手用这个 SDK 制作各种语音交互设备了！最近很热门的赛道-AI 玩具，这些看似普通的毛绒玩具，实则内藏乾坤，拥有强大的智能交互能力。它们不仅能进行日常对话，还能解答各类知识问题，更能支持多语言学习。此外，它们还具备个性化互动功能，能够感知用户的情绪变化，并给予相应的情感支持。除了名声最大的由字节跳动推出的 AI 陪伴玩偶“显眼包”外，像 FoloToy 等 AI 玩具初创公司也能在短短几个月内狂销近六位数。根据市场调研机构 Contrive Datum Insights 的预测，到 2030 年，全球 AI 玩具市场的规模有望达到 351.1 亿美元。。。还有之前火出圈的 aibi 口袋机器人，桌宠设备等等，OpenAI 这次开源的嵌入式实时语音 SDK，无疑是给这些设备送了个“外挂”。大胆预测一下，未来几年，这个赛道将会迎来爆发式增长。 永久福利 直投简历简历投递：join@speechhome.com扫码关注我们助力AI语音开发者的社区
