여러 페이지가있는 json을 반복하는 방법

Question

다중 페이지 json 객체를 반복하는 프로그램을 만들었습니다.

def get_orgs(token,url): 
    part1 = 'curl -i -k -X GET -H "Content-Type:application/json" -H "Authorization:Bearer ' 
    final_url = part1 + token + '" ' + url 
    pipe = subprocess.Popen(final_url, shell=False,stdout=subprocess.PIPE,stdin=subprocess.PIPE) 
    data = pipe.communicate()[0] 
    for line in data.split('\n'): 
     print line 
     try: 
      row = json.loads(line) 
      print ("next page url ",row['next']) 
     except : 
      pass 
    return row 
my_data = get_orgs(u'MyBeearerToken',"https://data.ratings.com/v1.0/org/576/portfolios/36/companies/") 

json으로 개체는 다음과 같습니다 : 나는 '다음'키를 반복 사용하고

[{results: [{"liquidity":"Strong","earningsPerformance":"Average"}] 
,"next":"https://data.ratings.com/v1.0/org/576/portfolios/36/companies/?page=2"}] 

하지만 시간이에 "잘못된 페이지"(존재하지 않는 페이지)을 가리 킵니다 . JSON 객체에는 각 페이지에 몇 개의 레코드가 있는지에 대한 규칙이 있습니까? 이 경우 가능한 한 페이지 수를 예상하는 데 사용합니다.

편집 : 세부 정보 추가 json에는 [결과], [다음]]의 키가 두 개 있습니다. 여러 페이지가있는 경우 '다음'키에 다음 페이지의 URL (as you can see in the output above)이 있습니다. 그렇지 않으면 '없음'이 포함됩니다. 그러나 문제는 때때로 '없음'대신 다음 페이지 (존재하지 않음)를 가리키는 것입니다. 그래서, Json에서 행을 셀 수 있고 루프가 얼마나 많은 페이지를 반복해야 하는지를 알기 위해 숫자로 나눌 수 있는지 알고 싶습니다. 제 생각에는

Answer 1

은 urllib2를 사용하거나 urllib.request은 코드를 이해하기 쉽게하기 위해 컬보다 훨씬 더 좋은 옵션이 될 것입니다,하지만 그 제약의 경우 - 그 ;-)

는 가정 작업 할 수 있습니다

row = [{'next': 'https://data.ratings.com/v1.0/org/576/portfolios/36/companies/?page=2', 'results': [{'earningsPerformance':'Average','liquidity': 'Strong'}, {'earningsPerformance':'Average','liquidity': 'Strong'}]}] 
result_count = len(row[0]["results"]) 

: json으로 응답은 (그렇지 않으면 json.loads이 예외가 발생합니다), 작업이 매우 간단하고 이것이 당신이 주요 결과 뒤에 항목의 금액을 인출 할 수 있도록 모두 한 줄에 httplib2를 사용하는 대안 솔루션은 다음과 같이 보일 것입니다. (나는 이것을 테스트하지 않았습니다) :

import httplib2 
import json 
h = httplib2.Http('.cache') 
url = "https://data.ratings.com/v1.0/org/576/portfolios/36/companies/" 
token = "Your_token" 
try: 
    response, content = h.request(
     url, 
     headers = {'Content-Type': 'application/json', 'Authorization:Bearer': token} 
    ) 
    # Convert the response to a string 
    content = content.decode('utf-8') # You could get the charset from the header as well 
    try: 
     object = json.loads(content) 
     result_count = len(object[0]["results"]) 
     # Yay, we got the result count! 
    except Exception: 
     # Do something if the server responds with garbage 
     pass 
except httplib2.HttpLib2Error: 
    # Handle the exceptions, here's a list: https://httplib2.readthedocs.io/en/latest/libhttplib2.html#httplib2.HttpLib2Error 
    pass 

httplib2에 대한 자세한 내용은 왜 놀랍습니까? Dive Into Python을 읽어 보시기 바랍니다.