←新闻详情

面壁智能 OpenBMB更新于 10月30日 14:22

面壁智能开源 ESP32-S3 语音塔台:MiniCPM5-2B + VoxCPM2

Hold a button. Request landing. Hear an AI tower respond to your simulated flight state. ✈️🎙️ Powered by MiniCPM5-2B + VoxCPM2.

AI 导读

面壁智能大使 @emwstudio 开源了一个 ESP32-S3 座舱式姿态仪项目,用 MiniCPM5-2B 生成塔台回复、VoxCPM2 合成语音。设备通过 Wi-Fi 把按键说话音频送到 Mac 端流水线,由 Qwen3-ASR 本地识别,回复音频再流回设备扬声器。塔台会结合高度、速度、航向、俯仰和滚转等模拟飞行数据,指出请求与仪表读数的不一致。

正文 · AI 翻译

按住按钮。请求着陆。听 AI 塔台回应你的模拟飞行状态。✈️🎙️ 由 MiniCPM5-2B + VoxCPM2 驱动。

来看看我们的大使 @emwstudio 打造的开源项目:一个 ESP32-S3 座舱式姿态仪,具备模拟飞行数据、语音告警,以及与 AI“塔台”的按键说话对话功能。🎙️

🧠 MiniCPM5-2B 为塔台提供回复。 包括高度、速度、航向、俯仰和滚转在内的飞行状态数据会被送入对话。塔台能够针对模拟飞机的状况作出回应,并指出你的请求与仪表读数之间的不一致。

🔊 VoxCPM2 让塔台的声音栩栩如生。 从参考录音进行声音克隆,再配合无线电风格的滤波、背景嘶声和静噪尾音,营造出那种熟悉的空对地无线电通话感。

📡 按住、说话、松开。 ESP32 通过 Wi-Fi 将音频发送到 Mac 端流水线。Qwen3-ASR 负责本地语音识别,MiniCPM5-2B 生成回复,VoxCPM2 合成音频并流回设备的扬声器。

🛠️ 这是一个由社区打造的创意示例,展示了模型能力与交互式硬件的结合,其固件和语音流水线代码均已公开,供他人探索和在此基础上继续开发。

💻 探索项目:https://t.co/mPmG9yaJLv 🤗 获取模型: https://t.co/TNUu629lXn https://t.co/NE1t03jOXz

你会用 MiniCPM + VoxCPM 构建什么?👀

#OpenBMB #MiniCPM #VoxCPM #OpenSource #ESP32

来源

面壁智能 OpenBMB