C#에서 스크립트로 생성 된 페이지를 긁는 방법?

Question

간단한 예 : Google 검색 페이지. 나는 페이지의 소스를 얻을 때

http://www.google.com/search?q=foobar

, 나는 기본 자바 스크립트를 얻을. 결과 페이지를 원합니다. 나는 무엇을해야합니까?

Answer 1

그것이 정말 전체 HTML입니다 자바 스크립트 아니라 것처럼 이을 보인다하더라도, 당신은 쉽게 HtmlAgilityPack으로 확인할 수 있습니다

HtmlAgilityPack.HtmlWeb web = new HtmlAgilityPack.HtmlWeb(); 
HtmlAgilityPack.HtmlDocument doc = web.Load("http://www.google.com/search?q=foobar"); 
string html = doc.DocumentNode.OuterHtml; 
var nodes = doc.DocumentNode.SelectNodes("//div"); //returns 85 nodes