Java의 ByteBuffer를 사용하여 수백만 개의 메시지 읽기

Question

여기 내 문제가 있습니다. 하나의 큰 gzipped 파일입니다. 수백만 개의 메시지.

각 메시지는 이루어져있다 : TYPE에 따라

***************** *************** ****************** 
* 2-byte LENGTH * * 1-byte TYPE * * N-byte PAYLOAD * , where N = (LENGTH-1). 
***************** *************** ****************** 

, 나는 PAYLOAD에 오프셋에서 몇 바이트를 읽고 수락하거나 메시지를 거부 할 선택해야합니다.

나는 이런 종류의 일을 java.io.DataInputStream을 사용하여 수행하는 방법을 알고 있지만 이것은 java.nio.ByteBuffer (see here!)의 완벽한 응용 프로그램처럼 보입니다. 그러나, 나는 그것을 설정하는 데 도움이 필요합니다.

그래서 ByteBuffer를 사용하여 gzip으로 압축 된 파일에서 메시지를 읽는 방법은 무엇입니까?

업데이트

나는 내가보고 싶은 것은 효율적으로 ByteBuffer를 사용해에게 바른 길에 저를 얻을 수있는 코드의 스켈 리턴 구현 것 같다. 감사!

Answer 1

귀하의 질문에 대답하지 않아서 불편을 끼쳐 드려 죄송 합니다만, 여기서 ByteBuffer를 DataInputStream에 사용하면 어떤 이점이 있는지 확실하지 않습니다. GZIPInputStream을 통해 스트림을 배치하여 데이터를 부 풀릴 수 있습니다.

GZIPInputStream gzipInput = new GZIPInputStream(yourInputStream); 
DataInputStream dataInput = new DataInputStream(gzipInput); 

ByteBuffer를 사용하면 입력 스트림에서 읽은 바이트를 이점없이 활용할 수 있습니다.

Answer 2

귀하의 프로토콜에 대한 모든 것을 저레벨로 작성하는 대신, Mina 또는 Netty와 같은 라이브러리를 사용하지 않으시겠습니까? 그들은 솔루션을 구현하기가 상당히 쉽습니다. 여담으로

미나 http://mina.apache.org/

의 Netty는 http://www.jboss.org/netty

, 우리는 Red5의 미나를 사용하여 메시지의 수백만을 처리 구현의 우리가 많은.