Elasticsearch 대용량 인덱스 재색인 방법

재색인의 필요성

다나와의 10억 건 이상의 상품 데이터를 대상으로 매주 reindex를 수행합니다. 이 과정에서 사전 변경 및 Mapping 변경을 적용합니다.

성능 최적화 방법

• replica는 reindex 후 생성
• refresh_interval을 -1로 설정
• 배치 사이즈를 적절히 조정
• 프라이머리 샤드 수 조정

주요 이슈와 해결 방안으로 es_rejected_execution_exception과 circuit_breaker_exception을 다루며, 각각의 문제를 해결하는 방법을 설명합니다.