2016-10-10 2 views
5

loading data into BigQuery에서 BigQuery 웹 콘솔의 작업 기록에서 복사 한 다음 오류가 발생합니다.ProtoBuf 형식 오류없이 BigQuery에 데이터를로드하려면 어떻게해야합니까?

Errors: 
query: Failed to load FileDescriptorProto for '_GEN_DREMEL_ONESTORE_METADATA_SCHEMA_': (error code: invalidQuery) 
Field numbers 19000 through 19999 are reserved for the protocol buffer library implementation. 
Field numbers 19000 through 19999 are reserved for the protocol buffer library implementation. 
[... repeated a total of exactly 1000 times...] 
Field numbers 19000 through 19999 are reserved for the protocol buffer library implementation. 

(error code: invalidQuery) 

데이터는 데이터 저장소 관리 백업입니다. 그 팀원들이 나를 BigQuery로 보냈습니다.

6 개의 임의로 선택한 종류 중 하나에서 오류가 발생합니다. 나머지는 성공적으로로드됩니다. 또한 다른 종류를로드하면 "너무 많은 입력란 : 10693 (오류 코드 : 잘못되었습니다)"오류가 발생합니다.

실패한 유형과 성공한 유형 모두 ~ 15GB의 데이터와 비슷한 크기입니다.

이 데이터를로드하려면 어떻게해야합니까?

+0

신고 해 주셔서 감사합니다. 우리가 볼 수있는 job_id가 있습니까? –

+0

bquijob_5ae806a6_157d8486814는 "너무 많은 입력란 : 10693 (오류 코드 : 잘못되었습니다)"을 생성합니다. bquijob_2129fd00_157a9f47a5d는 "프로토콜 버퍼 라이브러리 용으로 예약 됨"메시지를 생성합니다. 자세한 정보를 원하시면 오프라인으로 메시지를 보내주십시오. (그래서 우리는 구체적인 정보를 비공개로 유지할 수 있습니다). –

답변

3

BigQuery의 limitation : 테이블 당 최대 10000 개의 열이 원인입니다. 따라서 Datastore 백업을로드하는 유틸리티는이 경우 작동하지 않습니다.

관련 문제