基于ESP32-S3的AI智能无人机控制器

客户

一家消费级无人机制造商，为其现有飞控平台增加AI避障与目标跟踪功能。

挑战

在有效载荷有限（摄像头+计算模块总重低于250克）且必须无网络连接运行的无人机上，实现实时目标检测与跟踪。

产品概念与架构

ESP32-S3作为视觉协处理器，通过UART（MAVLink协议）与现有STM32F7飞控通信。OV5640 500万像素摄像头采集1080p视频。

工程方案

ESP32-S3运行ESP-DL框架，搭载INT8量化YOLO-Nano模型（320KB），实现30fps的人物/障碍物检测。边界框坐标转换为GPS相对偏移量，作为MAVLink位置目标发送至飞控。

成果

30fps 1080p目标检测。推理延迟20ms。总重量<40克。