HTTP를 통해 큰 파일을 루비로 다운로드하는 방법

Question

HTTP를 통해 파일의 처음 몇 킬로바이트 만 다운로드하면됩니다.

나는

require 'open-uri' 
url = 'http://example.com/big-file.dat' 
file = open(url) 
content = file.read(limit) 

을 시도하지만 실제로 전체 파일을 다운로드합니다.

Answer 1

이 소켓을 사용하는 경우 작동하는 것 같다 :

require 'socket'     
host = "download.thinkbroadband.com"     
path = "/1GB.zip" # get 1gb sample file 
request = "GET #{path} HTTP/1.0\r\n\r\n" 
socket = TCPSocket.open(host,80) 
socket.print(request)   

# find beginning of response body 
buffer = ""      
while !buffer.match("\r\n\r\n") do 
    buffer += socket.read(1) 
end   

response = socket.read(100) #read first 100 bytes of body 
puts response 

는 "루비 방법 '이 있다면 궁금 해요.

Answer 2

"OpenURI returns two different objects"을 확인하십시오. 미리 설정된 한계 값을 초과 한 후 다운로드를 중단하거나 나머지 결과를 버리는 방법을 남용 할 수 있습니다.

Answer 3

이것은 오래된 글이지만 여전히 내 연구에 따르면 답이 거의없는 것 같습니다.

require 'net/http' 

# provide access to the actual socket 
class Net::HTTPResponse 
    attr_reader :socket 
end 

uri = URI("http://www.example.com/path/to/file") 
begin 
    Net::HTTP.start(uri.host, uri.port) do |http| 
    request = Net::HTTP::Get.new(uri.request_uri) 
    # calling request with a block prevents body from being read 
    http.request(request) do |response| 
     # do whatever limited reading you want to do with the socket 
     x = response.socket.read(100); 
    end 
    end 
rescue IOError 
    # ignore 
end 

이동 백업하면 조기에 HTTP.finish를 호출 할 때 발생 년대 IO 오류를 잡아 : 여기 원숭이 패치 순 :: HTTP 비트에 의해 내가 생각 해낸 해결책이다.

참고는 HTTPResponse 객체 내 소켓 진정한 IO 객체 (이 BufferedIO라는 내부 클래스의)은 아니지만, 너무, 당신이 필요로하는 IO 방법을 모방, 원숭이 패치 꽤 간단합니다. 예를 들어, 내가 (exifr)를 사용하고 다른 라이브러리를 쉽게했다 readchar 방법을 추가 할 필요가 : 흥미로운 지점에 대한

class Net::BufferedIO 
    def readchar 
    read(1)[0].ord 
    end 
end