구조체의 내용을 이진 파일로 구문 분석

Question

C#을 사용하여 FORTRAN을 사용하여 만든 압축 된 바이너리 파일을 읽어야합니다. 이 파일은 (이하 "포맷되지 않은 순차 파일"섹션에서 페이지 아래로 절반 방법에 대해) 여기에 설명 된대로 "포맷되지 않은 연속"형식으로 저장됩니다

http://www.tacc.utexas.edu/services/userguides/intel8/fc/f_ug1/pggfmsp.htm

당신은 URL에서 볼 수 있듯이, 파일은 130 바이트 이하의 "덩어리"로 구성되며 각 덩어리를 감싸는 2 길이 바이트 (FORTRAN 컴파일러에 의해 삽입 됨)를 포함합니다.

그래서 컴파일러가 삽입 한 형식에서 실제 파일 페이로드를 구문 분석하는 효율적인 방법을 찾아야합니다.

파일에서 실제 페이로드를 추출한 후에 다양한 데이터 유형으로 파싱해야합니다. 그것은 다음 운동이 될 것입니다.

내 첫 번째 생각은 File.ReadAllBytes을 사용하여 전체 파일을 바이트 배열로 스터핑하는 것입니다. 그런 다음 형식을 건너 뛰고 실제 데이터를 두 번째 바이트 배열로 전송하여 바이트를 반복합니다.

결국 두 번째 바이트 배열에는 실제 파일 내용에서 모든 형식 지정을 뺀 값이 있어야합니다. 그런 다음 필요한 형식을 얻으려면 다시 돌아가야합니다.

저는 C#을 처음 접했을 때이 점에 대해 더 잘 받아 들일 수있는 방법이있을 것이라고 생각했습니다.

또한, 그것은 도움이 경우, 이러한 파일 (30메가바이트 말), 가장하지만 ...이 기록에 의해 기록처럼 파일을 읽을 수있는

Answer 1

한 가지 방법 훨씬 작은 것 상당히 큰 수 (예를 들어, 읽기 length 바이트 다음에 데이터 청크, 바이트 배열 인 레코드 목록 작성). 그런 다음 레코드 모음이 추가 구문 분석 루틴으로 전달됩니다.

그러나 4.0 이상인 경우 파일 매핑에 new class이 있는데 이는 더 효율적이지만 ReadAllBytes과 유사하게 작동합니다.

ReadAllBytes 또는 MemoryMappedFile을 사용하는 경우 모든 레코드 길이를 먼저 구문 분석하여 큰 이진 파일에 메모리 "인덱스"를 만드는 것이 좋습니다. 이는 특정 레코드 만 필요할 경우 특히 유용합니다.

Answer 2

바이트를 반복하는 대신 System.IO.BinaryReader을 살펴보십시오. 파일을 FileStream으로 열고 BinaryReader에 랩핑하면 스트림 포인터가 blob 로의 오프셋을 추적하는 기본 유형을 직접 읽을 수 있습니다. 엔디안과 사용자 정의 유형을 직접 고려해야 할 수도 있습니다. 어쩌면 개별 바이트를 읽는 방법 위에 BinaryReader에 대한 확장 메소드를 직접 구축해야 할 수도 있습니다.

바이트 배열의 데이터가 필요한 경우 MemoryStream에 배열을 래핑하는 경우에도 BinaryReader을 계속 사용할 수 있습니다.

파일이 크면 나는 File.ReadAllBytes을 알 수 있습니다. FileStream은 버퍼링해야하며, 메모리 매핑 된 파일 사용에 대한 Stephen의 제안은 특히 포맷팅을 위해 두 번째 패스를 만들어야 할 경우 더욱 정교한 (더 효율적일 수 있습니다) 대안처럼 들립니다.