웹 페이지에서 동적 콘텐츠를 저장 하시겠습니까?

Question

웹 사이트에서 동적 텍스트를 저장하고 서버의 파일에 덤프 할 수 있습니까? 관심있는 특정 사례는이 페이지의 노래 제목을 http://www.z1035.com/player.php 으로 저장하고 모든 노래 제목을 내 서버의 파일에 저장하는 것입니다. 이것이 가능한가? 어떤 방법으로이 작업을 수행 할 수 있습니까?

Answer 1

당신이 말하는 것은 일반적으로 '스크래핑'으로 알려져 있습니다.

http://www.developertutorials.com/blog/php/easy-screen-scraping-in-php-simple-html-dom-library-simplehtmldom-398/

Answer 2

파이썬의 URLLIB 라이브러리 내 의견으로는, 아주 쉽게 긁어하게 : 여기에 기사를 PHP로 할에 대한 한 가지 방법입니다.

import urllib, re 

url = "http://www.z1035.com/player.php" 
f = urllib.urlopen(url) 
t = f.read() 
# use regular expression here 
m = re.search(t, "some pattern") 
print m.group(1) 

이렇게하면 외부 리소스가 로컬 파일 인 것처럼로드되어 필요에 따라 분석 할 수 있습니다.

이전에 내가 들었던 라디오 프로그램에 대한 모든 트랙 목록을 저장하고 싶었습니다. 파이썬을 사용하여 모든 트랙 목록의 목록을 다운로드 한 다음 프로그래밍 방식으로 각각을 방문하고 내용을 파일에 추가했습니다. 그것은 매우 편리했고, 아마 20 줄을 잡았습니다.