1
Google 쇼핑 결과를 다듬기 위해 웹 스크래퍼를 만들려고합니다. 어떤 아이디어를 시작할 것인가? 나는 파이썬으로 기계화를 사용하고 있었지만 몇 가지 한계점이 있음을 발견했습니다. Scrapy 또는 BeautifulSoup가 나아질까요?Mechanise에서 Scrapy 또는 BeautifulSoup으로 전환해야합니까?
Google 쇼핑 결과를 다듬기 위해 웹 스크래퍼를 만들려고합니다. 어떤 아이디어를 시작할 것인가? 나는 파이썬으로 기계화를 사용하고 있었지만 몇 가지 한계점이 있음을 발견했습니다. Scrapy 또는 BeautifulSoup가 나아질까요?Mechanise에서 Scrapy 또는 BeautifulSoup으로 전환해야합니까?
OP 대신 게시 됨.
나는이 문서가 도움이 발견 :
http://swizec.com/blog/scraping-with-mechanize-and-beautifulsoup/swizec/5039
나는 구글 측에서 조절 얻고 있었다.
너무 광범위하다고 생각하므로 (도움말 센터 별) 닫으려고합니다. 그러나 Mechanise에서 어떤 한계가 발생했는지 알려주시겠습니까? 그러면 조언이 관련성이 있습니다. – halfer
글쎄, 내 가장 큰 한계 인 mechanize로 속도 경계를 넘었다. –
@Shajo - 굵게/기울임 꼴/인라인 코드 도구는 멋지지만 책 스타일의 글을 선호합니다. 코드 형식은 코드에만 사용되며 굵은 기울임 꼴은 간과해서 사용해야하며 강조가 실제로 필요한 부분입니다. – halfer