날씨 정보를 통합한 음성 제어 기상 도우미.
침실 프라이버시를 중시하는 프리미엄 가전 브랜드가 로컬 음성 제어가 가능한 침대 옆 알람 시계를 원했습니다.
지속적인 클라우드 연결 없이 안정적인 웨이크 워드 감지와 기본 의도 인식을 구현하여 침실에서 사용자 프라이버시를 존중해야 했습니다.
ESP32-S3(벡터 명령어를 지원하는 듀얼 코어 Xtensa LX7 @ 240MHz)는 Wi-Fi 기능과 신경망 가속의 균형을 위해 선택되었습니다. 이 칩은 맞춤형 세그먼트 LCD와 I2S Class-D 앰프를 구동합니다.
ESP-SR 음성 인식 프레임워크를 활용했습니다. TensorFlow Lite for Microcontrollers (TinyML)를 사용하여 15개의 오프라인 음성 명령을 위한 맞춤형 400KB 음향 모델을 훈련했습니다. 이 장치는 날씨 정보와 시간 동기화를 위해서만 Wi-Fi에 연결되며, 마이크 데이터는 엄격히 로컬에서 처리됩니다.
3미터 거리에서 웨이크 워드 감지 정확도가 95% 이상입니다. 클라우드 오디오 전송이 전혀 없어 100% 프라이버시를 보장합니다. 전체 시스템 전력 소비는 1W 미만입니다.
ChipTalk이 다음 프로젝트에서 어떻게 결과를 제공할 수 있는지 논의해 보세요.