컴퓨터 비전(CV)을 활용해 사진을 자동으로 크롭하고 보정하는 디지털 프레임입니다.



럭셔리 홈 데코 브랜드로, 가족 사진을 자동으로 큐레이션하고 보정해주는 대형(21인치) 디지털 캔버스를 제작했습니다.
거실 환경을 방해하는 능동 냉각 팬 없이, AI 이미지 업스케일링과 얼굴 그룹화를 로컬에서 실행하면서 2K IPS 디스플레이를 구동해야 했습니다.
Rockchip RK3566(쿼드코어 Cortex-A55, 1.0 TOPS NPU)을 선택했습니다. 이 칩은 2K 패널에 필요한 MIPI-DSI 대역폭과 이미지 처리를 위한 NPU 성능을 제공합니다. 4GB LPDDR4는 메모리 집약적인 그래픽 파이프라인을 처리합니다.
Android 11 BSP를 개발했습니다. Rockchip의 RKNN API를 사용해 클라우드를 통해 전송된 저해상도 스마트폰 사진을 업스케일링하는 edge 기반 Super Resolution GAN(생성적 적대 신경망)을 구현했습니다. 또한, 거대한 방열판 역할을 하는 맞춤형 알루미늄 백플레이트를 설계하여, 집중적인 NPU 부하 시 SoC 온도를 55°C 미만으로 유지했습니다.
완벽한 2K 디스플레이 렌더링을 구현했습니다. 사진은 로컬에서 얼굴별로 그룹화되어(프라이버시 보호) 이미지당 2초 미만으로 업스케일링됩니다.
ChipTalk이 다음 프로젝트에서 어떻게 결과를 제공할 수 있는지 논의해 보세요.