2011-03-22 6 views
2

Hadoop/Hbase를 사용하여 웹 검색을 구현하려면 어떻게해야합니까? 누구든지 나에게 몇 가지 가이드 라인이나 튜토리얼을 제공해 주시겠습니까?Hadoop/Hbase를 사용하여 웹 검색을 구현하려면 어떻게해야합니까?

+0

안녕하세요 Priya, 문제의 해결책이 있으십니까? 심지어 나는 같은 문제에 직면 해있다. hadoop을 사용하여 웹 크롤러를 구현하는 다른 문제가 있습니다. – Shekhar

답변

1

이 기사는 map-Reduce에 관한 내용이며 map-reduce를 사용하여 정보 검색의 원칙을 구현하는 데 대한 몇 가지 예를 제공합니다.
http://labs.google.com/papers/mapreduce.html
는 또한 오픈 소스 정보 검색 시스템 아파치 루씬, 아파치 SOLR을 확인 할 수 있습니다

0

@Yash : HBase를 들어

: Definitive guide에서 HBase를에 장을 읽으십시오. 그런 다음 Apache Hbase guide을 읽으십시오. 이렇게하면 Hbase에 대해 더 명확하게 알 수 있습니다.

Jmeter은 테스트 목적으로 서버에 여러 쿼리를 보내는 데 도움이 될 수 있습니다.

Nutch은 공개 소스 인 hadoop 기반 웹 크롤러입니다. Solr은 lucene을 내부적으로 활용하는 검색 플랫폼입니다. 당신은 그들의 디자인을 이해하고 귀하의 웹 검색 애플 리케이션을 구현하기 위해 이것들을 들여다 볼 수 있습니다.

1

lily 프로젝트를 사용해보십시오. 이것은 hbase 테이블 데이터를 인덱싱하는 것을 다루므로 인덱싱 된 데이터는 검색의 구현에 쉽게 사용될 수 있습니다. 여기 릴리는 사용하기 쉬운 액세스 API를, 높은 수준의 데이터 모델과 스키마를 종합적으로 통합, 대화 형 데이터 플랫폼에 아파치 HBase, 하둡 및 SOLR을 통합

http://www.lilyproject.org/lily/index.html

를 참조 할 수있는 링크입니다 언어, 유연한 실시간 인덱싱 및 Apache Solr의 풍부한 검색 기능을 제공합니다. 무엇보다도, Lily is open source

관련 문제