Elasticsearch ngram 설정

Question

안녕하세요 Elasticsearch에서 ngram으로 토크나이저 작업을 하는중에 몇가지 궁금한 사항이 생겼습니다. min, max_gram에 관한건데요, 적정 수치를 보통 어떻게 맞추는지 문득 궁금해졌습니다. 범위를 너무 넓히면 검색어가 길어질수록 자원소모가 심할 것 같고, 좁게 주자니 제대로 검색이 안나올 것 같습니다. 검색하려는 데이터를 기준으로 조절하는게 추천방법인데, 통상적으로 이 적정 수치는 어떻게 정하는지 잘 떠오르지가 않네요. 다른분들은 어떻게 조절하는지 궁금합니다.

킁킁탐정 · Accepted Answer

검색엔진은 자원 소모를 트레이드 오프 대상으로 삼아서 검색을 합니다. 자원 소모를 줄이면서 동시에 적절한 검색이 이루어지도록 하는 이른바 "튜닝"은 데이터에서 검색해야하는 부분을 고려해서 꾸준하게 테스트하는 수밖에 없습니다.검색 품질은 min/max 외에도 검색 + 나 " " 같은 검색 연산자 사용 여부에 따라 크게 달라지기도 합니다. 시작은 2-8정도로 잡고 데이터를 기반으로 여러 테스트를 해보면서 조절하고 실제 서비스하면서 로그를 남겨서 얼마나 검색이 잘되는지 안되는지 여부에 따라 여러 조절을 거쳐야합니다.

Elasticsearch ngram 설정

1개의 답변

Q&A 목록