乐鑫 ESP-Claw 全面升级,多 Agent 协同 + Skills 商店,让 AI 在 MCU 上真正落地

创建时间:2026-07-23 14:32

乐鑫信息科技 (688018.SH) 于 2026 年 7 月正式发布 ESP-Claw 全新升级版本,围绕设备端 AI Agent 的开发体验进行了全面优化。新版本新增 Skills Lab 技能商店、多 Agent 协同执行、增强的上下文管理、Lua 异步运行时、更丰富的外设支持以及在线刷机等能力,进一步提升 AI Agent 的开发效率、扩展能力与部署体验。

ESP-Claw 是乐鑫推出的面向 AIoT 设备的 Chat Coding AI Agent 框架。它采用 LLM + Lua 混合架构,使开发者能够通过自然语言定义设备行为,并在 ESP SoC 上完成感知、推理、决策与执行的完整流程。本次升级进一步增强了设备端 AI Agent 的工程化能力,在任务规划、上下文管理、脚本执行、外设控制及能力复用等方面均得到完善,为构建长期运行、可持续扩展的 AIoT 应用提供了更完整的基础能力。

 

在技能复用层面,本次升级最大的亮点是全新推出的 Skills Lab 技能商店。开发者可通过商店浏览、搜索、安装和分享 ESP-Claw Skill,也可直接从云端一键安装。每个 Skill 不仅包含功能描述,还能封装 Lua 脚本、静态资源、调用示例、外设依赖及能力声明,使 LLM 能够完整理解适用场景、输入参数、工具调用方式及异常处理逻辑。目前 Skills Lab 已涵盖游戏、工具、网络、媒体、传感器、AI、UI 和硬件等多个类别,典型可用技能包括摄像头预览、运动检测、天气查询、A股行情、GitHub Star 查询、网络电台以及 ServoDog 四舵机机器狗控制等。UI 类 Skill 支持网页端直接在线仿真体验,开发者可将项目中的脚本和硬件适配封装为 Skill 并分享给社区,实现能力的快速复用与生态共建。

 

Agent 核心引擎方面,此次升级引入了多 Agent 协同执行能力。主 Agent 可将搜索、调试、代码生成、硬件验证等任务拆分给子 Agent 执行,实时跟踪子 Agent 的进度,并在完成后汇总结果,显著增强了长链路、多步骤任务的组织能力。上下文管理同步得到增强,系统按需构建符合当前任务的提示词,优化前缀一致性以提升缓存命中率;当上下文变长时自动压缩,降低复杂任务的上下文成本。此外,新增了结构化长期记忆系统,采用摘要标签与按需召回机制,不依赖向量数据库以适配 MCU 资源限制,能够自动提取用户偏好、硬件连接信息和跨任务约定,并具备自动归并、淘汰与压缩能力。会话管理方面,支持 /session 创建、查看、切换和删除会话,实现不同项目和设备间的上下文隔离,异常 Agent Loop 退出后支持工作状态恢复。新增的 Plan Mode 可根据实际硬件给出方案分工与风险点评估。

 

Lua 运行时层面,本次升级使框架从演示阶段走向工程化落地。新增的异步执行能力支持动画渲染、音频播放、传感器监听和屏幕仪表盘等长期任务作为异步 Job 启动,可查询运行状态、停止任务或查看执行日志,运行期间脚本输出自动保存。固定业务逻辑可直接作为本地规则执行,无需 LLM 参与,实现低延迟的自动化控制。在可靠性方面,框架引入了基于 PSRAM 的 RAMfs 虚拟文件系统,降低 Flash I/O 延迟和磨损;支持分区故障时自动恢复关键文件,防止文件系统损坏导致启动循环。兼容性方面,ESP-Claw 现同时兼容 ESP-IDF v5.5.4 和 v6,为不同版本的项目迁移提供了更大灵活性。

 

在外设与联网能力方面,ESP-Claw 通过 Lua 直接访问 I2C、UART、MCPWM、PCNT、RMT、ADC、USB 和 BLE HID 等外设接口,支持 USB 摄像头、USB 麦克风与扬声器、LCD 显示、触摸输入、WS2812 LED、红外、IMU、环境传感器、磁力计和电池电量计等模块。新增 LVGL 图形界面支持,可通过 Lua 绘制 UI 并处理触摸输入。联网方面,HTTP Client 与 HTTP Server 使 Lua 脚本能够拉取外部信息(天气、股票、仓库更新、媒体资源),并为硬件项目提供浏览器端的 Web 控制面板,HTTP 连接复用机制可有效降低重复请求延迟。

 

在硬件生态与部署体验方面,支持的开发板通过 ESP Board Manager 和社区贡献已扩展至 20 余款,覆盖 ESP32-S31、ESP32-S3、ESP32-P4、ESP32-C5 等乐鑫芯片平台,适配 M5Stack、DFRobot、LilyGO、Waveshare 等主流生态板。乐鑫同步推出围绕 ESP-Claw 打造的全能型智能终端 ESP-Ditto,搭载 ESP32-C5,集成屏幕、扬声器、麦克风和摄像头,并提供多种扩展接口;ESP-Ditto-Lite 配备电池与磁吸结构,轻巧便携,面向户外及移动场景。部署方面,ESP-Claw 支持浏览器在线烧录与 Wi-Fi 初始化,无需本地开发环境,大幅降低上手门槛。

 

作为乐鑫科技一级代理商,飞睿科技紧跟乐鑫产品线技术演进,为客户提供从芯片选型、模组供应到方案落地的全链路服务。针对 ESP-Claw 框架升级,飞睿科技可提供开发板选型推荐、框架技术支持与调试指导等一系列服务,助力开发者快速上手 ESP-Claw,将 AI Agent 创意高效转化为可落地的智能硬件产品。