2012-02-15 9 views
0

HTML : TreeBuilder를 사용하여 크롤링 된 웹 페이지를 추출 할 때 Perl LWP를 사용하여 지속적으로 크롤링합니다. 나는 HTML의 모든 인스턴스를 철저히 삭제한다 :: TreeBuilder 크롤러의 메모리 풋 프린트는 천천히 그러나 꾸준히 상승한다. (나는 크롤링되는 모든 페이지에서 10-30 바이트 틱을 볼 것이다. (나는 Valgrind를 사용하고있다. .) 힙 사용량을 측정하기 위해펄 LWP 메모리 누출?

을 지금 흐름은 같은 :

  • 크롤링 페이지
  • 새 트리 빌더 객체를 생성
  • 구문 분석 페이지
  • 삭제 트리 빌더 객체

누군가 LWP 또는 TreeBuilder에 메모리 누수가 있는지 여부에 대한 힌트가 있습니까? LWP에 메모리 누수가 있다는 보고서를 많이 읽었지 만 그 문제에 대한 응답은 보지 못했습니다.

저는 Perl v5.10.1을 실행 중입니다.

감사합니다!

답변