2010-04-12 15 views
-3

아무도 내가 최소한의 코딩으로 실제로 작동하는 무료 웹 크롤러를 어디서 얻을 수 있는지 알고 있습니까?웹 크롤러 필요

저는 인터넷 검색을하고 실제로 작동하지 않는 오래된 것들 또는 작동하지 않는 openwebspider만을 찾을 수 있습니다.

이상적으로 나는 웹 주소와 그 페이지에 포함 된 링크를 저장하고 싶습니다.

제안 사항?

답변

4

처음부터 작성하는 것이 좋습니다. 크롤러를 검색하는 데 소비 한 시간을 사용하여 크롤러에 기록 할 수 있습니다.

+2

+1. 나는 모든 웹 크롤러가 미묘하게 다르기 때문에이 (모든?) 영역에 최소 코딩과 같은 것이 있다고 생각하지 않습니다. –

+0

나는 코딩 능력이 있다고 생각하지 않는다. 나는 C++의 경험이 조금 밖에 없으며, 3 일 동안 크롤링을 시작해야 할 필요가 있기 때문에 시간이 없다. – user314011

+0

이제 내 자신의 크롤러를 작성,이 작품 희망 – user314011