Miroir de fitness IA basé sur Rockchip RK3588

Client

Une startup de fitness à domicile visant à fournir une correction de posture et un comptage de répétitions en temps réel, pilotés par l'IA, via un miroir intelligent pleine hauteur.

Défi

Exécuter des algorithmes complexes de suivi squelettique 3D à 30 ips tout en diffusant simultanément une vidéo d'instructeur en 4K et en affichant l'interface utilisateur, ce qui nécessite une bande passante de calcul massive.

Concept produit et architecture

Le Rockchip RK3588 phare (CPU 8 cœurs, GPU Mali-G610, NPU 6 TOPS) est le cœur absolu de ce système. Il utilise 8 Go de LPDDR4x pour gérer la bande passante mémoire élevée requise par le décodage 4K et l'inférence IA simultanés.

Solution d'ingénierie

Nous avons construit un pipeline logiciel sophistiqué sous Android 12. Le flux 4K de l'instructeur est décodé via le VPU matériel. En parallèle, un flux de caméra grand-angle de 8 MP est acheminé directement vers le NPU en utilisant l'architecture mémoire zéro-copie de Rockchip. Le NPU exécute un modèle propriétaire de suivi squelettique en 33 points. Le GPU superpose ensuite les graphiques du squelette sur l'interface du miroir en temps réel.

Résultat

Aucun décalage perceptible entre le mouvement de l'utilisateur et le retour à l'écran. Charge NPU soutenue de 6 TOPS avec des températures SoC restant sous 60°C grâce à un dissipateur thermique en aluminium extrudé sur mesure.