로컬 웹에서 일부 웹 스크래핑 루틴을 실행하고 싶지만 기본 레일 서버는 1 기가 이상의 메모리를 소비합니다 (5 시간 동안 하나의 요청 만 실행). 이것에 더 적합한 서버가 있습니까?웹 스크 레이 핑을위한 로컬 루비/레일 서버
0
A
답변
4
이것은 웹 로봇입니다. 레일이 너무 무겁습니다.
Nokigiri를 사용하는 스크립트로 충분합니다. 스크립트를 실행하도록 cron을 설정할 수 있습니다.
당신이 더 높은 수준의 것들을 원한다면, 카피 바라는 테스트를 주로한다고해도 과언이 아닙니다.
+0
스크립트는 어떤 언어로 쓰여 집니까? –
+0
물론 루비. –
+0
괜찮아요 ...... –
관련 문제
- 1. 데이터 스크 레이 핑을위한 웹 사이트 로그인
- 2. 웹 스크 레이 핑을위한 회전 프록시
- 3. 웹 스크 레이 핑/스크린 스크 레이 핑
- 4. PHP에서 웹 스크 레이 핑
- 5. PHP 웹 스크 레이 핑
- 6. SAS 웹 스크 레이 핑
- 7. 웹 채취로 웹 스크 레이 핑
- 8. 파이썬 웹 스크 레이 핑 쓰레드 성능
- 9. 웹 스크 레이 핑을 감지하는 방법
- 10. txt 모드에서 웹 스크 레이 핑
- 11. Jaunt Library와 Java 웹 스크 레이 핑
- 12. 웹 스크 레이 핑/크롤링을위한 리소스
- 13. Gambas로 웹 스크 레이 핑이 가능합니까?
- 14. 웹 스크 레이 핑 도구 선택기 테스트
- 15. wget을 사용하여 웹 스크 레이 핑 최적화
- 16. 도움이 필요한 웹 스크 레이 핑
- 17. node.js가있는 웹 스크 레이 핑 사이트
- 18. Heroku 및 웹 스크 레이 핑
- 19. 루비로 CSV로 웹 스크 레이 핑/내보내기
- 20. Windows 전화 웹 스크 레이 핑
- 21. 자동화 된 웹 스크 레이 핑 문제
- 22. 연속 URL에서 웹 스크 레이 핑하기 R
- 23. PHP 스크 레이 핑 테이블
- 24. Kissmetrics 데이터 스크 레이 핑
- 25. rvest를 사용하면 div를 활성화하고 스크 레이 핑을위한 새 콘텐츠를 표시하는 탭을 클릭 할 수 있습니까?
- 26. Python의 웹 스크 레이 핑 도구를 통해 웹 사이트에 로그인
- 27. 웹 스크 레이 핑을 위해 유니 코드를 사용하는 방법
- 28. 지저분한 사이트에서 아름다운 스프를 사용하여 파이썬 웹 스크 레이 핑
- 29. node.js/cheerio로 웹 스크 레이 핑 - <span> 텍스트
- 30. "웹 스크 레이 핑 스크립트 빌더"를 찾고
Sinatra는 Ruby에서 웹 응용 프로그램을 신속하게 작성하기위한 DSL입니다. 따라서 메모리를 적게 소비 할 수 있습니다. –
스크래핑은 반드시 서버가 필요하지는 않습니다. 이 문맥에서 레일즈는 무엇을 사용합니까? – romeroabelleira
나는 말미잘 보석을 사용 중입니다 –