2012-08-28 2 views
0

Searcharoo.NET을 사용하여 특정 언어로 "testsite.com/en"웹 사이트를 크롤링하고 있습니다. "testsite.com/fr", "testsite.com/us"등이 있습니다. 나중에 각 사이트의 페이지를 색인화하여 검색 할 수 있지만 다른 언어를 구분해야합니다.Searcharoo를 특정 페이지로 제한

searcharoo가 testsite.com/en에서 크롤링을 시작하면 testsite.com/fr과 같은 다른 언어의 페이지에도 색인이 생성됩니다. 이런 일이 발생하지 않도록하는 방법이 있습니까? 크롤러가 특정 페이지에서 앞으로 검색 또는 정지 만하도록 제한 할 수 있다고 생각했지만 searcharoo에서 주제에 대한 문서를 찾지 못했습니다.

감사합니다.

답변

1

남자가 쓴 다음 블로그를보고하십시오 :

http://draganbl.blogspot.com/2011/04/how-do-you-use-searcharoo-library-to.html 

그것은 당신이 각 언어에 대해 "크롤러/거미"를 당신이 원하는대로 할,하지만 어쩌면 설치 수있는 것처럼 보이지 않는다. 내 대답은 꽤 막연한 것 같지만 아마도 당신을 방향으로 보낼 수 있습니다.

관련 문제