문자열의 일치 단어에 대한 SgmlLinkExtractor 및 정규 표현식

Question

특정 URL을 구문 분석하기 위해 치료에서 SgmlLinkExtractor 기능을 사용하고 있습니다.

동적 URL을 크롤링하기 위해 start_requests 함수를 재정의했습니다.

이 보이는 같은 :

start_requests (자기) : ..... 수율 요청 (url.strip(), callbackA)

콜백 A가 지금 아무것도하지 않습니다.

또한 SgmlLinkExtractor에 대해 process_value를 구현했지만 결코 호출하지 않았습니다.

이

은 내가 사용 규칙입니다 :

규칙 =

다시 callbackB는 호출되지 않습니다 [규칙 (SgmlLinkExtractor (= 수()), 콜백 = callbackB은 = 사실에 따라)].

Answer 1

당신의 콜백이 거미에 선언하는 경우, 그들은 글로벌 범위가되지 않으며 self.와 클래스 범위로 당신을 참조 할 필요가 :

rules = [ 
    Rule(SgmlLinkExtractor(), callback=self.callbackB, follow=True), 
]