还记得openai直播12天里边,这只能说会道的麋鹿吗?它能听懂声音,流畅的语音交流。对,它的硬件SDK,刚刚被开源了!
这个项目,可以理解成一个智能体,放到各种玩具,小家电里边,让它具备语音互动能力。
https://github.com/openai/openai-realtime-embedded-sdk
SDK 已经在 esp32s3 和 Linux 上完成了测试。如果用 Linux 系统,无需额外的硬件即可运行。如果打算在硬件上使用 SDK,可以买Freenove ESP32-S3-WROOMSonatino - ESP32-S3 音频开发板。
Realtime Embedded SDK 提供了全套工具链支持,包括安装、构建和部署等各个环节,大幅简化了将 AI 功能引入微型设备的过程。只需完成 WiFi 配置 和 OpenAI API 密钥 设置,便能让设备即时接入云端 AI。