Rockchip RK3588搭載AIフィットネスミラー

クライアント

自宅向けフィットネススタートアップ。AIによるリアルタイムフォーム補正とレップカウントを、全身が映るスマートミラーで提供することを目指しています。

課題

複雑な3D骨格トラッキングアルゴリズムを30fpsで実行しつつ、4Kインストラクター動画のストリーミングとUIレンダリングを同時に行うため、膨大な計算帯域幅が必要でした。

製品コンセプトとアーキテクチャ

本システムの中核は、フラッグシップSoC Rockchip RK3588（8コアCPU、Mali-G610 GPU、6 TOPS NPU）です。8GBのLPDDR4xを搭載し、4KデコードとAI推論の同時実行に必要な高いメモリ帯域幅を確保しています。

エンジニアリングソリューション

Android 12をベースに、高度なソフトウェアパイプラインを構築しました。4KインストラクターストリームはハードウェアVPUでデコード。同時に、広角8MPカメラの映像はRockchipのゼロコピーメモリアーキテクチャを介してNPUに直接ルーティングされます。NPUは独自開発の33点骨格トラッキングモデルを実行。GPUはその結果をミラーUI上にリアルタイムで骨格グラフィックスとしてオーバーレイ表示します。

結果

ユーザーの動きと画面フィードバックの間に知覚可能な遅延はゼロ。カスタム押し出しアルミニウムヒートシンクにより、SoC温度は60°C未満に抑えられ、6 TOPSのNPU負荷を持続的に処理できます。