AI
메신저용 온디바이스 이미지 모델 학습기 1편: 지식 증류로 확장한 다국어 이미지 검색
두줄요약
네트워크 없이 모바일 기기에서 동작하는 메신저용 이미지 이해 기능을 만들고 지식 증류로 다국어 검색을 구현했습니다. 또한 LiteRT 변환과 벡터 DB 튜닝으로 온디바이스 배포와 실사용 성능을 맞췄습니다.
핵심 내용
- 메신저용 온디바이스 이미지 이해 기능 개발 사례
- 영어 전용 이미지-텍스트 임베딩 모델을 지식 증류로 다국어(영어, 일본어, 중국어(번체), 태국어, 한국어) 텍스트 인코더로 확장
- 이미지 검색을 의미 기반으로 구현하고 Recall@5 평균 78% 수준 확보
- PyTorch 모델을 LiteRT로 변환, 전처리·토크나이저 정합, HNSW 벡터 DB 튜닝으로 모바일 배포 가능성 확보