ESP‑Mosaico 是乐鑫基于ESP32‑S31打造的 AI 原生模块化智能交互开发套件。板载 480×480 QSPI 方形触控屏、完整音频通路、六轴 IMU 双磁力计搭配磁吸扩展硬件体系依托ESP‑Claw AI 智能体框架实现对话式硬件编程。可外接摄像头、8×8 RGB 灯矩阵、多功能交互子板等扩展模块提供Chat Coding、Vibe Coding两套开发范式使用者仅用自然语言描述创意即可在实体硬件上快速完成原型迭代。一、核心特点1、主控与板载硬件采用 ESP32‑S31 双核 RISC‑V 主控集成 480×480 QSPI 方形触摸屏、ES8311 音频编解码器、D 类功放、BMI270 六轴 IMU、双 BMM150 磁力计、SPI NAND 大容量存储同时具备 Wi‑Fi6、蓝牙 5.4、Thread/Zigbee 无线能力兼顾多媒体、感知与无线互联需求。2、磁吸模块化扩展机身左右配置两组2×10P、2.54 mm 标准间距扩展插槽支持磁吸式热插拔扩展。可对接 SC101IOT 摄像头模块、多功能交互子板、8×8 RGB 灯矩阵等原厂模块模块自带 EEPROM主板上电自动识别硬件组态免去手动配置引脚、编写底层驱动的工作。3、AI 原生两套开发工作流基于 ESP‑Claw 智能体框架分为两种开发模式覆盖从快速想法验证到正式工程原型Chat Coding对话编程板端直接通过语音 / 文字描述需求AI 生成可运行应用快速验证创意原型。Vibe Coding氛围编程电脑端 AI 智能体完成编码、仿真、编译、真机部署、测试迭代的完整闭环面向复杂 ESP‑IDF 工程开发。4、多设备协同能力支持磁吸物理对接、邻居设备检测、ESP‑NOW 无线通信可做多机联动、跨屏交互、多人互动游戏等分布式创意项目。二、软件生态Chat Coding板载对话式编程用自然语言直接生成硬件应用开箱即用。Vibe Coding电脑端完成项目创建、仿真模拟、工程构建、固件部署、真机反馈迭代。Ideas Center 社区创意库社区可浏览、下载、分享成品 Idea 应用包含乐器、交互表盘、游戏、艺术装置等大量案例。三、典型创意应用示例8×8 RGB 矩阵灯模块实现动态灯效、像素图案、动画光影展示。名画艺术灯将《星空》《蒙娜丽莎》等经典画作拆解为 64 色块通过 RGB 矩阵输出光影效果。望潮 Tide Watcher将股票涨跌数据转化为潮汐海面动态可视化搭配语音查询与异动提醒。旅行打卡随机生成摄影主题完成拍摄后生成九宫格旅行作品集。浴火木星480×480 屏幕实时渲染低模太空空战游戏结合 IMU 姿态操控、振动马达、子板灯带反馈。四、开发资源与工具硬件文档提供 CoreBoard V1.0 / V1.2 主板用户指南、摄像头模块、多功能交互子板完整手册。固件工具支持浏览器网页在线刷写固件无需本地搭建复杂烧录环境。ESP‑Mosaico 把模块化硬件、端侧 AI 智能体、多媒体交互融为一体非常适合创意原型验证、创客教学、端侧智能交互设备开发。快速上手预装的 Mosaico-Claw Idea1、ESP-Mosaico 按键与接口总览按键与充电指示灯速查2、开机界面3、向右滑动进入设置Settings连接WIFI4、连接WIFI后的开机界面有连接标志显示时间和本地福州气温点开有一周天气预报5、进入设置Settings最后一行是 ESP‑Mosaico 的About关于本机 页面ModelESP-MOSAICO设备型号乐鑫 ESP‑Mosaico 模块化开发套件Software0.4.0当前运行的IdeaMosaico‑Claw应用版本号也就是 Chat Coding 这套 AI 对话程序的版本。GSPv1.5.1GSP Espressif Graphics Scene Processor乐鑫图形场景处理器是 Mosaico 底层专用 UI 渲染框架所有界面、按钮、动画都靠它渲染v1.5.1 是这个 UI 库的版本号。Display2.16 480×480屏幕参数2.16 英寸分辨率 480×480 方形触控屏和硬件规格一致。6、升级至最新固件在线 https://mosaico.ai/zh-hans/firmware打开关于本机查看更新情况7、相机功能 camera简单拍照带闪光灯打开 ESP-Mosaico 摄像头子板的视觉功能面板QRQR Code二维码识别读取二维码信息Color颜色识别识别画面里目标颜色Motion运动检测识别画面里移动变化下方三个按钮相册预览、拍照、翻转摄像头右上角是拍照与闪光灯开关。依托 SC101IOT DVP 摄像头开箱即可直接做视觉识别也可以在 ChatCoding 里用自然语言编写视觉项目。8、CLAW 对话编程入口第二个ESP‑Mosaico 的Mosaico‑ClawChat CodingAI 对话编程界面搭配摄像头模块。Quick Ask快速问答直接提问、查资料AI Create核心的对话编程用自然语言描述AI 生成硬件代码Install Skill安装扩展技能Idea / 功能插件New Session开启一轮新对话Continue接续上一轮对话底部提示按住说话、松开发送语音交互一句话用语音和 AI 对话直接给 Mosaico 写硬件程序。需要先进行基本配置。9、Works 是 Mosaico 的应用仓库存放和管理你所有做好、安装好的创意项目第三个ESP‑Mosaico 里Works作品库的已安装页面用来管理所有装好的 Idea 应用Recent最近打开的项目Installed本机已安装应用列表一共 4 个应用商店、二款小游戏和相册App Store应用商店可以下载更多创意项目Dino、Flappy Bird、AlbumLua 编写的示例小游戏 / 相册应用当前状态为 Stopped未运行所有 AI 生成、社区下载的程序都会在这里保存、启动。10、第四个是设置SettingsESP‑Mosaico 的SETTINGS系统设置页分三屏逐项说明Sound音量调节Battery电池信息Security安全相关配置Debug调试日志、串口调试开发排查问题用About就是前面的关于本机页面查看硬件、软件版本AI Model绑定 AI 模型服务IM Channels消息通道NetworkWiFi 网络配置Display屏幕亮度调节这里是整机系统配置入口网络、音量、亮度、AI 服务、调试、版本信息都在这里管理。11、第五个IMU姿态传感器加速度 陀螺仪读取倾斜、运动数据12、第六个是Album相册查看摄像头拍摄的照片13、第七个是Music音乐播放14、第八个是Bricks弹珠小游戏15、第九个是Weather联网天气查询16、第十个是ESP‑Mosaico多功能交互模块Interaction Module的启动界面。Interaction交互模块自带方向按键、摇杆、蜂鸣器、LED 等外设可以直接当遥控器控制小车、机械臂也能在积木编程 / ChatCoding 里读取按键、摇杆信号做交互项目搭配摄像头模块一起使用非常适合做视觉 遥控的机器人创客项目