검색엔진의 Analyzer, 형태소분석기 ≠ 토크나이저
10
AI 요약

이 글은 AI가 원문을 분석하여 핵심 내용을 요약한 것입니다.

검색엔진의 키워드 분석

이 게시물은 요기요의 검색 시스템에서 사용자의 입력 키워드를 분석하는 방법에 대해 설명합니다.

Analyzer 모듈

  • 검색엔진의 Analyzer는 키워드 분석을 담당
  • Character-Filtering, Tokenizing, Token-Filtering의 3단계로 구성
  • 형태소 분석기와 토크나이저의 차이를 설명

Token-Filtering

토큰 단위를 처리하는 마지막 단계로, 동의어 필터와 같은 다양한 필터를 적용하여 검색 품질을 높입니다.

연관 게시글