6月11日機(jī)智云攜手火山引擎、扣子發(fā)起，聯(lián)合CSDN、GitCode、廣和通、奕斯偉、愛灣學(xué)院舉辦的“開源智聯(lián)·具身同行”字節(jié)豆包AIoT開源生態(tài)沙龍圓滿成功，正式推出基于豆包的 OpenEmbodied AI技術(shù)、產(chǎn)品及開源方案的落地與應(yīng)用，致力于降低AIoT開發(fā)門檻，推動具身智能在設(shè)備端的廣泛應(yīng)用。

開源AIoT核心能力矩陣

機(jī)智云宣布全面開源其AIoT開發(fā)的核心組件，覆蓋硬件、固件、應(yīng)用框架與示例代碼全鏈條。此次開源的核心目標(biāo)是賦能開發(fā)者“跳過技術(shù)壁壘”，快速為IoT硬件注入AI能力。

開源核心內(nèi)容

AI小程序框架：提供設(shè)備端構(gòu)建AI交互應(yīng)用的基礎(chǔ)框架。

AIGagent固件：實現(xiàn)AI智能體在資源受限的嵌入式設(shè)備（如ESP32系列）上高效運行的關(guān)鍵固件。

AI開發(fā)板資料：豐富的硬件參考設(shè)計、代碼，支持快速硬件原型搭建。

“小智”項目示例：完整開源的端到端AI語音聊天機(jī)器人參考實現(xiàn)。包含語音喚醒、流式對話、多語言識別、大模型集成、TTS、物聯(lián)網(wǎng)控制等核心功能代碼。

【代碼倉庫見文末鏈接】

可量產(chǎn)方案：機(jī)智云AIoT + Coze 協(xié)同開發(fā)

項目提供了一套成熟可立即投入商用的開發(fā)方案，核心是機(jī)智云AIoT平臺與Coze平臺的深度協(xié)同。

喚醒與打斷：BOOT鍵（點擊/長按），離線語音喚醒 (ESP-SR)。

語音交互：流式對話(WebSocket)，支持國語、粵語、英語、日語、韓語等多語言識別。

大模型集成：LLM (Qwen, DeepSeek, Doubao等)，大模型TTS。

智能體能力：可配置提示詞與音色（自定義角色），短期記憶與對話總結(jié)。

顯示交互：支持OLED/LCD顯示信號、對話內(nèi)容、圖片表情；支持多語言顯示（中/英）。

多模態(tài)：支持?jǐn)z像頭接入。

連接：Wi-Fi / ML307 Cat.1 4G。

廣泛硬件兼容：核心支持ESP32系列主流芯片平臺

ESP32-S3

ESP32-C3

ESP32-P4

ESP32-C2

二次開發(fā)便利：開發(fā)者可在機(jī)智云平臺便捷完成AI設(shè)備的二次開發(fā)與功能部署。

智能體端(Coze平臺):

靈活智能體編排：開發(fā)者可在Coze平臺上，利用其強(qiáng)大的工作流和插件能力，輕松定制和編排專業(yè)化的AI智能體，定義其知識、技能與交互邏輯。

無縫對接設(shè)備：定制好的智能體可高效部署到運行機(jī)智云AIGagent固件的設(shè)備上。

該方案優(yōu)勢：硬件功能完善、平臺成熟度高、智能體定制靈活、支持多種連接方式，為開發(fā)者提供了一條快速通向可量產(chǎn)AIoT產(chǎn)品的路徑。

文末查看可量產(chǎn)AI方案詳細(xì)開發(fā)指南

自定義開發(fā)板指南

手把手教你如何為AI語音機(jī)器人項目適配新的ESP32系列開發(fā)板。

支持超過50種ESP32開發(fā)板變種，每種板型都有獨立的初始化代碼目錄。

文末查看自定義開發(fā)板指南

物聯(lián)網(wǎng)控制模塊指南

深入解析OpenEmbodied技術(shù)中實現(xiàn)設(shè)備控制的核心模塊。

實現(xiàn)了AI語音聊天機(jī)器人的物聯(lián)網(wǎng)控制功能，使用戶可以通過語音指令控制接入到ESP32開發(fā)板的各種物聯(lián)網(wǎng)設(shè)備。

文末查看物聯(lián)網(wǎng)控制模塊指南

立即獲取資源，邁向開發(fā)新機(jī)遇

開源項目的所有代碼、文檔、硬件資料和示例均已開源，開發(fā)者可通過以下渠道獲?。?/p>

GitHub的鏈接：

https://github.com/gizwits/OpenEmbodied

GitCode的鏈接:

https://gitcode.com/org/GizwitsIoT/repos