Espelho de Fitness com IA baseado no Rockchip RK3588

Cliente

Uma startup de fitness doméstico que visa fornecer correção de forma e contagem de repetições em tempo real, impulsionadas por IA, através de um espelho inteligente de corpo inteiro.

Desafio

Executar algoritmos complexos de rastreamento esquelético 3D a 30fps enquanto simultaneamente transmite vídeo de instrutor em 4K e renderiza a interface do usuário, exigindo enorme largura de banda de computação.

Conceito do Produto e Arquitetura

O carro-chefe Rockchip RK3588 (CPU de 8 núcleos, GPU Mali-G610, NPU de 6 TOPS) é o núcleo absoluto deste sistema. Ele utiliza 8GB de LPDDR4x para lidar com a pesada largura de banda de memória exigida pela decodificação 4K simultânea e inferência de IA.

Solução de Engenharia

Construímos um pipeline de software sofisticado usando Android 12. O stream de instrutor em 4K é decodificado via VPU de hardware. Simultaneamente, um feed de câmera grande-angular de 8MP é roteado diretamente para a NPU usando a arquitetura de memória zero-copy da Rockchip. A NPU executa um modelo proprietário de rastreamento esquelético de 33 pontos. A GPU então sobrepõe os gráficos do esqueleto na interface do espelho em tempo real.

Resultado

Zero atraso perceptível entre o movimento do usuário e o feedback na tela. Carga sustentada da NPU de 6 TOPS com temperaturas do SoC permanecendo abaixo de 60°C devido a um dissipador de calor de alumínio extrudado personalizado.