搭载Rockchip RV1106与6轴陀螺EIS的宠物第一视角POV多模态AI视觉项圈

客户

一家头部宠物IP内容孵化机构与消费级智能硬件品牌，致力于通过新一代AI可穿戴设备记录宠物眼中的奇妙世界，打造高互动率的第一人称萌宠社交内容生态。

挑战

宠物奔跑跳跃具有极大的角速度与地面反冲冲击，传统运动相机挂在宠物脖颈上会导致画面剧烈颠簸旋转，令人头晕目眩；同时，数百小时的连续长录像会导致存储迅速耗尽且人工筛选高光画面工作量巨大；此外，小巧轻量机身内的连续视频编解码发热问题极易灼伤宠物皮肤。

产品概念与架构

主控芯片选用 瑞芯微 Rockchip RV1106G2 专用端侧视觉处理器（集成 ARM Cortex-A7 处理器、0.5 TOPS 高能效 NPU、自研 3.0 智能 ISP）。 搭配 Sony IMX335 1/2.8英寸星光级低照度 500 万像素图像传感器与 140° 超大广角无畸变镜头模组。 集成 Bosch BMI270 6轴超低功耗惯性测量单元，搭载 32GB 高速 eMMC 闪存与双频 Wi-Fi 6 + BLE 5.3 组合无线模块。采用航天级纳米导热凝胶配合石墨烯导热膜，实现整机被动均匀散热。

工程解决方案

1. 6轴陀螺硬件级EIS实时增稳：陀螺仪以250Hz采样角速度，固件实时解算四元数位姿变化，与ISP硬件图像运动向量在流水线内深度同步，动态裁切补偿剧烈奔跑引起的俯仰与翻滚摇晃，输出如电影云台般平滑的2K 30fps超高清画面。
2. 端侧NPU高光事件检测模型：在0.5 TOPS NPU上部署微型多模态轻量级检测算法，结合IMU加速度突变与视觉目标识别，精准捕捉【追逐扑咬】、【社交嗅闻】、【主人互动】、【享受进食】等关键情绪峰值片段，自动标注时间戳。
3. 云端多模态大模型自动剪辑Vlog：当项圈回到充电底座连接Wi-Fi时，秒级同步高光片段至云端，由多模态大模型结合宠物行为性格，自动生成以宠物口吻配音配乐解说的60秒每日精选Vlog。

成果

防抖效果达到专业运动手持云台水准，第一人称社交视频完播率较传统拍摄提升340%。端侧高光自动剪辑采纳率达92%，单台设备连续录制时长突破4.5小时，外壳最高温升严格控制在38℃以内，首发上线即登顶跨境电商宠物智能硬件热卖榜。