소셜 미디어 어 그리 게이터를 개발하면서 Java 코드를 사용하여 페이스 북, 트위터 및 기타 소셜 미디어 네트워킹 사이트를 크롤링하는 방법이 있는지 궁금해하고있었습니다. FaceBook Pages에서 특정 데이터를 크롤링하고 싶습니다. FaceBook 또는 다른 요구 사항의 특정 사용 권한이 필요합니까?페이스 북 페이지 크롤링
2
A
답변
2
기술적으로 예 ... # 2 https://www.facebook.com/legal/terms
당신이 로봇으로 자바를 구축하는 경우, 내가 JS와 로컬/원격 웹 서버를 사용하여 더 많은 성공을 거두었습니다. 이론 상으로는 좀 더 쉽게 발견 할 수 있지만
당신이 속도를 제한하고 약간의 임의의 대기 시간을 추가하는 경우 본질적으로 자동화 된 웹 브라우저로 구축하는 것이 좋습니다.
1
예 https://www.facebook.com/apps/site_scraping_tos_terms.php에 따르면 Facebook에서 서면 허가를 받아야만 크롤링 할 수 있습니다.
관련 문제
- 1. 제어 페이스 북 크롤링 지연
- 2. 페이스 북 탭 페이지
- 3. 페이스 북 C는 # 페이지
- 4. 페이스 북 페이지 카테고리
- 5. 페이스 북 - 페이지
- 6. 표시 페이스 북 뉴스 피드 페이스 북 비즈니스 페이지
- 7. 페이스 북 등록 페이지 구현 페이스 북 등록 플러그인과 마찬가지로
- 8. 페이스 북 개발자 - 특정 카테고리의 페이스 북 페이지 목록
- 9. 페이스 북 페이지 열기 - 사실입니까?
- 10. 방문자 구하기 페이스 북 페이지
- 11. 딥 링크로 페이스 북 페이지
- 12. 페이스 북 "친구 초대 페이지"
- 13. 페이스 북 팬 페이지 만들기
- 14. 맞춤 페이스 북 로그인 페이지
- 15. 페이스 북 회사 페이지 스타일링
- 16. 페이스 북 가입과 같은 페이지
- 17. 페이스 북 페이지 권한 쿼리
- 18. 페이스 북 앱 설정 페이지
- 19. 페이스 북 페이지 엔트리 제출
- 20. 페이스 북 로그인 페이지 대신 화이트 페이지
- 21. 페이스 북
- 22. 페이스 북
- 23. 페이스 북
- 24. 페이스 북 페이지 액세스 토큰을 가져 와서 페이스 북 페이지 벽에 자동으로 게시하십시오.
- 25. 페이스 북 프로그래밍 큰 사진 나는 가짜 페이스 북 페이지 (엔터테인먼트 페이지)를 만든
- 26. 페이스 북 페이지 ID를 페이스 북 페이지 이름에서 가져 오는 방법
- 27. 그룹의 페이스 북처럼 페이스 북
- 28. 전화 애플리케이션과 페이스 북 팬 페이지 통합
- 29. 캔버스 페이지 크기 페이스 북 -C# -sdk
- 30. 유령 페이지와 병합 페이스 북 페이지
감사합니다. JS 및 로컬 서버용 코드가 있습니까? 도움이 될 것입니다. –
크롤러를 공유 할 수 있습니까? – shinzou
https://github.com/vivekpatani/ai-ml-projects-data-science/tree/master/project-social-media-aggregator 우리는 훨씬 더 효율적인 새로운 버전을 개발 중입니다. 계속 게시 할 예정이며 다음 달에 준비 할 예정입니다. @kuhaku –