Elasticsearch 3TB의 인덱스를 reindex 하는 방법
2
AI 요약
이 글은 AI가 원문을 분석하여 핵심 내용을 요약한 것입니다.
Elasticsearch 대용량 인덱스 재색인 방법
재색인의 필요성
다나와의 10억 건 이상의 상품 데이터를 대상으로 매주 reindex를 수행합니다. 이 과정에서 사전 변경 및 Mapping 변경을 적용합니다.
성능 최적화 방법
- replica는 reindex 후 생성
- refresh_interval을 -1로 설정
- 배치 사이즈를 적절히 조정
- 프라이머리 샤드 수 조정
주요 이슈와 해결 방안으로 es_rejected_execution_exception과 circuit_breaker_exception을 다루며, 각각의 문제를 해결하는 방법을 설명합니다.