1
나는 PHP cURL에서 강력한 경험을 가지고 있지만 Python Scrapy를 사용하여 웹 사이트 데이터를 고수했습니다. 데이터를 고치고 반환 된 값과 속도 및 메모리 사용을 조작하는 것이 더 낫다는 것을 알지 못합니다.PHP cURL 대 파이썬 스콥?
그리고 파이썬에서 (수율) 기능은 무엇입니까?
A
답변
3
치료는 프레임 워크입니다. 파이프 라인과 URL을 체계적으로 크롤링하는 방법을 정의 할 수 있습니다. cURL은 HTTP와 같은 프로토콜을 통해 페이지를 조회하거나 파일을 다운로드하는 보일러 플레이트 코드입니다.
광범위한 스크 레이 핑 시스템이나 프로젝트를 구축하려는 경우에는 Scrapy가 더 나은 방법 일 수 있습니다. 그렇지 않으면 hacky 또는 한 번 일에 대해 cURL을 깨기가 어렵습니다 (또는 PHP에 제약이있는 경우).
관련 문제
- 1. 파이썬 스콥 : 속성을 파서에 전달
- 2. 파이썬 스콥 xpath 반환 배열
- 3. PHP PECL_HTTP 대 cURL 확장자
- 4. php curl - 브라우저 대 스크립트
- 5. 파이썬 대 PHP 정규식
- 6. 테이블 열과 행을 잡기위한 파이썬 스콥
- 7. 파이썬 스콥 : allowed_domains 데이터베이스에서 새 도메인 추가
- 8. XmlHttpRequest 대 cURL
- 9. cURL 대 __SoapClient for PHP Soap Application
- 10. PHP Curl 대 커맨드 라인 컬의 차이점
- 11. PHP : 병렬 cURL 성능 - RollingCurl 대 ParallelCurl
- 12. PHP Http Pooling 대 Curl Multi
- 13. AJAX 대 CURL
- 14. CURL 대 fsockopen 청킹
- 15. CLI cURL to PHP cURL
- 16. php + curl
- 17. Curl 대 원격 데이터베이스 대 로컬 파일?
- 18. 스콥 계정 모델과 acts_as_tenant?
- 19. getJSON 성능 속도 대 cURL?
- 20. python + json 대 curl 문제
- 21. 멀티 스레딩 PHP 대 멀티 스레딩 파이썬
- 22. 파이썬 + 장고 대 ASP.NET + C#/VB와 PHP?
- 23. PDF에서 CSV로 데이터 스크래핑? 파이썬 대 PHP?
- 24. PHP 클래스에서 cURL 메서드 만들기
- 25. PHP CURL 라이브러리에서 curl --resolve와 동등 함
- 26. 유닉스 커맨드 라인 CURL PHP CURL
- 27. cURL to PHP cURL (복수 필드)
- 28. InitSpider에서 스콥 로깅 문제가 발생했습니다.
- 29. php cURL 문제
- 30. Posterous api php curl