2012-01-10 3 views
0

데이터 및 가격을 수집하고 내 데이터를 내 사이트의 검색 결과로 제공하기 위해 특정 웹 사이트 (특정 사이트)를 긁는 웹 사이트를 만들고 싶습니다. 기본적으로 검색 엔진과 비슷하지만 특정 사이트에 대해서는 특정 방식으로 색인이 생성됩니다. 이 글을 직접 작성할 수는 있지만 알고 싶습니다.긁어서 색인을 생성하는 법률 스크립트?

  1. 법적으로 가능합니까? 예를 들어 이베이에서 모든 항목을 가져 와서 검색 엔진에 넣고 사용자가 내 사이트를 사용하여 이베이를 검색 할 수있게 할 수 있습니까?
  2. 돈을 벌면 어떻게 될까요?
  3. 이미 이렇게하는 인기있는 PHP 스크립트가 있습니까?

법적 문제가 해결되었습니다. 이 문제를 해결할 수있는 방법을 찾았습니다. (콘텐츠 제작자의 허락을 받았습니다.) 유일한 진짜 질문은 콘텐츠를 크롤링하기 위해 무엇을 사용할 수 있습니까? 특히 각 사이트마다 다른 규칙이 있습니다. 내가 세워야 해? 동일한 콘텐츠를 두 번 거미에 넣지 않는 것이 똑똑해야합니다.

+0

답변 1) 및 2). 콘텐츠 라이센싱에 확실히 몰입 할 것입니다. 나는 사람들이 가입하고 자신이 좋아하는 주제를 골라 내서 모든 것을 집계 할 수있는 뉴스 집계 포털을 만드는 아이디어를 타파했다. 나는 긁어 모으기위한 허가를 얻기 위해 몇 개의 매장에 접근했다. 그들은 기사당 1,000 달러처럼 저에게 요금을 청구하려고했습니다. 상업적 목적으로 콘텐츠를 다시 게시하는 것이 훨씬 문제가 될 것이라고 생각할 수 있습니다. – WhiskeyTangoFoxtrot

+1

@Foxtrot에서는 저작권이있는 콘텐츠 (예 : 뉴스 기사)와 저작권이 적용되지 않는 사실 (공개적으로 액세스 할 수있는 사이트에 광고 된 가격 등)을 구별 할 수 있습니다. 이것이 techos가 법률 자문을 제공해서는 안되는 이유입니다 :-) – paxdiablo

답변

4

정상인가요?

예. 아니. 아마.

전체 행성을 포괄하는 일련의 법률이 없기 때문에 실제로 법률 자문을위한 것이 아니므로, 귀하는 귀하의 관할지에서 변호사를 찾아야합니다.

내 생각에 정보 만 사용하는 한 대부분의 관할권에서 괜찮을 것입니다. 그래서, 이베이 로고도없고, 당신이 그들과 연관 될 수있는 표현도 없습니다.

하지만 (나는 내 ​​작업의 일환으로 미국의 서브 종을 많이 취급하지만) 나는 변호사가 아니다, 확실히 당신의 변호사와 (하지 법적 조언이다)이 조언은 당신이 지불 한 모든 센트 가치가 입니다!

내가이 돈을 벌면 어떻게됩니까?

좋은 당신 :-) mega-bucks를 만드십시오. 그러나 위의 점을 참조하십시오.

이미 이렇게하는 인기있는 PHP 스크립트가 있습니까?

그건 내가 대답 할 수없는 것입니다. 내 경험으로는 PHP가 0에서 아무 사이 에나있다.

1

합법성은이 지역에서 약간 그늘합니다. robots.txt (http://www.robotstxt.org/robotstxt.html) 파일이 있는지 먼저 확인하여 웹 사이트가 웹 스파이더를 환영하는지 확인해야합니다.

또한 훌륭한 sphider (http://www.sphider.eu/)라는 PHP 검색 스크립트가 있습니다.

편집 :

내가 많은 웹 사이트가 당신이 그들의 웹 사이트의 조각을 복용 한 후 내용에서 온 웹 페이지에 사용자를 연결에 문제를 가지고 볼 수 없습니다.그러나 이익을 얻기 위해 자신의 모든 콘텐츠를 가져 와서 자신의 웹 사이트에 표시하려는 경우 콘텐츠에서 이익을 얻는 사람인 것처럼 많은 웹 사이트에 문제가 있다고 가정 할 수 있습니다.

+0

원래 콘텐츠로 다시 연결하고 결코 내 자신의 콘텐츠를 가장 할 수는 없습니다. – coderama

0

1) 합법적입니까? 예를 들어 이베이에서 모든 항목을 가져 와서 검색 엔진에 넣고 사용자가 내 사이트를 사용하여 이베이를 검색 할 수있게 할 수 있습니까?

이것은 기술적으로 가능합니다. 이 작업을 아주 쉽게 수행 할 수있는 PHP 스크립트를 작성할 수 있습니다. 나는 누군가가 elses 사이트에서 콘텐츠를 긁어 냄으로써 귀하의 지적 재산, 허가없이 그들의 데이터를 사용하게 될 것이기 때문에 경계선이라고 불만을 제기합니다.

2) 제가 돈을 벌면 어떻게 될까요?

그런 다음 데이터의 원래 소유자가 당신을 뒤쫓을 가능성이 매우 높습니다. 중지 및 고지 통지를 한 다음 고소합니다. eBay만큼 큰 조직이라면 깜박임없이이 작업을 수행 할 수 있습니다.

3) 이미 이렇게하는 인기있는 PHP 스크립트가 있습니까?

질문의 법적 문제로 인해 이미 이미 수행 한 스크립트가 있는지 의심 스럽습니다.


이베이 (ebay) 및 기타 대형 데이터 제공 업체로부터 올바른 데이터를 가져 오는 기술은 API 또는 응용 프로그래밍 인터페이스를 사용하는 것입니다. 이들은 프로그램이 서로 통신하도록 설계된 특수 프로토콜, 언어입니다. 이는 페이지 스크래핑보다 훨씬 효율적이며, 또한 제공자로부터 데이터를 가져 오는 합법적 인 방법이기도합니다.

이베이 관련 API에 대한 자세한 내용은 여기를 참조하십시오. http://developer.ebay.com/common/api/

관련 문제