OKAPI BM25 매개 변수를 선택하는 방법 : b 및 k1

Question

실제로 궁금한 점은 BM25 수식에서 b 및 k1의 값을 경험적으로 검증하거나 평가할 수있는 방법이 궁금합니다. 다른 말로하면 가장 과학적으로 평가되는 것은 무엇입니까?

이러한 유형의 평가가 수행되는 방법을 알아보기 위해 참조 할 수있는 연구 보고서가 있습니까?

Answer 1

이러한 BM25 매개 변수의 최적 값은 데이터 수집에 따라 다릅니다. 읽기 : Pluggable Similarity Algorithms | Elasticsearch

매개 변수를 조정하는 간단한 방법은 매개 변수를 조정 한 다음 성능 영향을 평가하는 것입니다. 결과가 만족스럽지 않으면 매개 변수를 다시 변경하고 결과를 평가하십시오. Genetic 또는 ACO와 같은 metaheuristic 알고리즘을 사용하여 자동화 할 수 있습니다.

일부 논문

도 사용할 수 있습니다

• He, B., & Ounis, I. (2003, November). A study of parameter tuning for term frequency normalization.
• He, B., & Ounis, I. (2005, March). Term Frequency Normalisation Tuning for BM25 and DFR Models.