开源!手搓AI 视觉大模型飞艇,ESP双核主控、1080P 高清图传、支持声控飞行、保持跟随、巡航拍摄、智能导航

开源!手搓AI 视觉大模型飞艇,ESP双核主控、1080P 高清图传、支持声控飞行、保持跟随、巡航拍摄、智能导航 文末联系小编获取项目源码 源码交付开启 IoT 物联网与 AI 融合的未来ESP-AirPuff 是一款基于 ESP32-P4双核主控 和 ESP32-C5通信模组的AI 视觉大模型智能飞艇主板搭载1080P 高清摄像头配备气压计、六轴 IMU、磁力计等传感器与外设接口固件系统集成了 AI 语音交互、视觉感知、姿态控制和实时图传等先进功能同时支持手机App遥控和图传便于二次开发。硬件配置概览采用 WTDKP4C5-S1 双核模组发挥 ESP32-P4 的高性能计算与 ESP32-C5 的双频 Wi-Fi 6 连接优势板载 1080P MIPI 摄像头集成传感器气压计、六轴 IMU、磁力计执行与扩展4 路电机驱动支持正反转、2路舵机接口用于摄像头云台控制供电1S 动力锂电池供电板载充电管理兼顾续航与维护便利软件与控制能力概览基于 ESP-Brookesia AI 框架集成 AI 语音交互与视觉识别支持通过 MCP 控制飞行姿态与位置融合多传感器数据提升抗扰能力飞行状态更稳定支持网页控制与实时高清图传具备悬浮高度与旋转角度闭环控制让飞行稳定可控、可预期 AI飞艇功能介绍ESP-AirPuff 智能飞艇基于ESP-Brookesia AI 框架深度融合了 AI 语音交互与视觉识别技术。它不仅支持自然的语言聊天和语音控飞还能通过 MCP 协议精准操控飞行姿态与位置。得益于多传感器数据的融合无人机抗干扰能力显著增强飞行更加稳定。特别值得一提的是它具备高度与旋转角度的闭环控制让每一次飞行都稳如泰山、可控可预期。在使用体验上无需下载安装任何 APP只需打开浏览器即可实现网页控制与实时高清图传真正做到了“即开即用”。 AI 大模型视觉语音交互通过接入 云端大模型用户可以通过语音指令控制飞艇的上升、下降等基本动作实现真正的“声控飞行”。硬件支持多麦克风远场语音识别图像采集与反馈。语音识别支持语音指令识别响应速度快识别准确率高上升下降控制通过语音指令上升、下降等直接控制飞艇高度飞行模式切换支持语音切换不同的飞行模式如悬停模式、巡航模式等状态查询可通过语音查询飞艇当前状态如电量、高度、位置等 定高与旋转角度闭环控制气压计定高融合气压计与加速度计获得准确的高度估计进行闭环控制修正浮力变化的影响旋转角度控制通过陀螺仪角速度闭环准确控制旋转角度。️ 摄像头实时图传与控制板载 MIPI 摄像头 支持 H.264 编码的实时视频传输为用户提供第一人称视角的飞行体验。H.264 硬件编码利用 ESP32-P4 的硬件编码能力实现高效的视频压缩降低带宽占用低延迟传输优化的传输协议和编码参数实现低延迟的视频流传输多分辨率支持支持多种分辨率输出可根据网络情况自动调整云台控制通过舵机接口控制摄像头云台实现上下转动扩大视野范围本地存储支持将视频流保存到 SD 卡 或 eMMC实现飞行录像功能 核心硬件模块架构主控模块WTDKP4C5-S1 模组内部集成 ESP32-P4 和 ESP32-C5 双芯片其中ESP32-P4高性能双核主控负责图像处理、编码、控制算法等核心功能ESP32-C5双频 Wi-Fi 6 连接芯片负责无线通信和数据传输音频系统ES8311 音频编解码器提供高质量的音频输出能力ES7210 音频 ADC用于外部声音采样与音频回采为回声消除和声源定位提供硬件支持NS4150B音频功放2014B 扬声器用于音频播放2 x 模拟麦克风用于语音输入和声源定位视频系统SC2336 MIPI 摄像头最大支持 1080P 图像采集用于实时图传和视觉识别传感器系统BMP581 气压计用于高度测量和气压监测BMI270 六轴 IMU用于姿态检测和运动感知BMM350 磁力计可选用于航向角测量和地磁校准输出接口4 x 空心杯电机驱动每路支持正反转控制用于驱动飞艇的推进器前方推进器2 个空心杯电机 螺旋桨用于前进、后退、左右偏转控制中央推进器1 个空心杯电机 螺旋桨用于上升、下降控制备用额外一路驱动备用2 x 舵机接口接口 1用于控制摄像头云台实现摄像头角度调整接口 2预留用于二次开发通信接口高速 USB 接口用于数据传输、固件升级和调试预留 IO 口用于扩展其他外设和功能存储系统SD 卡槽eMMC 接口支持高速 SD 卡用于存储音频、飞行数据和视频录像电源管理动力锂电池供电使用 250 mAh 动力锂电池使用空中对接接口便于更换。TP4057用于电池充电。 写在最后ESP-AirPuff 智能飞艇 不仅可以作为赛博飞宠陪伴你还可应用于多种场景航拍探索从空中视角探索和拍摄记录精彩瞬间实时监控实时查看飞艇周围环境用于安全监控和巡检商业活动婚礼/派对/舞台活动等场合巡逻记录教学演示用于飞行教学和演示直观展示飞行过程开源项目地址https://oshwhub.com/esp-college/esp-airship如有IoT 源码采购和项目交付需求请扫码联系小编微信号: beacon0418往期推荐☞开箱即用国产开源30AI视觉算法IoT智能物联网云平台☞国产开源Web 工业IoT组态软件支持Modbus、OPC支持拖拉拽☞源码交付7天完成国产信创部署智慧工地方案☞4万元国产信创私有化部署破解县域无人机AI巡检平台落地难题☞上班摸鱼 智能 AI 监控老板行踪☞免费开源千知AI知识图谱平台支持DeepSeek、Qwen☞信创部署源码交付县域低空经济无人机 AI 巡检平台☞智慧农业大爆发AI物联网区块链重构“天空地”一体化监测免责声明本公众号所发布的内容来源于互联网我们会尊重并维护原作者的权益。由于信息来源众多若文章内容出现版权问题或文中使用的图片、资料、下载链接等如涉及侵权请告知我们我们将尽快处理。主理人微信: beacon0418