관리되지 않은 클릭 로그로 검색 엔진을 평가하는 경우

Question

내 웹 사이트에서 검색하는 사용자의 로그와 입력 한 검색어 및 클릭 한 결과가 있습니다. 검색 알고리즘을 개선하고 싶습니다. 하지만 먼저 품질을 측정 할 방법이 필요합니다.

아마존 터크 등으로 데이터를 수집하고 인간에게 테스트 스위트를 생성 할 수 있다는 것을 알고 있습니다. 그러나 내 웹 사이트 로그에서 이미 사용 가능한 데이터를 사용하고 싶습니다.

누구나 내가 이걸 할 수있는 방법과 사용할 알고리즘을 알려줄 수 있습니까?

감사합니다.

Answer 1

실제로 인터리빙이라는 온라인 평가 기술을 사용하는 큰 주제입니다. 웹 서버 로그 만 있습니까, 아니면 사용자 정의 검색 로그도 만드십니까? Google Analytics? 이 주제에 대한 다른 작업에 대한 포인터와 검색 엔진 시스템 중심의 평가를 잘 소개 개요

, Mounia Lalmas의 슬라이드 참조 : https://www.slideshare.net/mobile/mounialalmas/an-introduction-to-systemoriented-evaluation-in-information-retrieval

나는 실제적인 목적을 위해 생각을, 당신은에 의해이 게시물을 확인할 수 있습니다 Daniel Tunkelang : http://twiggle.com/blog/evaluating-good-search-part-ii-measuring-searcher-behavior?utm_content=59131694

첫 번째로 클릭 한 결과의 위치 (Mean Recipopal Rank)를 확인하거나 재구성하기에 너무 많은 작업 인 경우 간단히 클릭 수가 좋을 것입니다. 이렇게하면 기준이됩니다. 도메인 및 애플리케이션 설정 방법을 고려할 때 클릭 (전환율) 후에 액션 (예약, 구매, 연락 등)이 얼마나 자주 발생하는지 확인할 수 있습니다. 웹 사이트에 트래픽이 발생하면 A/B 테스트를 통해 클릭률 및/또는 전환율이 높아집니다.