Java 애플리케이션에서 BigQuery로 데이터를 수집하는 방법

Java 애플리케이션에서 BigQuery로 데이터를 가져오고 싶습니다. BigQuery API를 직접 사용하는 경우 성능 문제가 있습니까? 응용 프로그램이 AWS에서 실행 중입니다.Java 애플리케이션에서 BigQuery로 데이터를 수집하는 방법

출처

2017-12-11 Faisal P P

성능에 문제가있는 경우 Java API [1,2]와 함께 BigQuery 스트리밍 삽입을 사용할 수 있습니다. [3]은 할당량 제한 중 일부를 설명합니다.

[1] https://cloud.google.com/bigquery/streaming-data-into-bigquery

[2] https://cloud.google.com/blog/big-data/2017/06/life-of-a-bigquery-streaming-insert

[3] https://cloud.google.com/bigquery/quotas#streaminginserts

출처

2017-12-11 18:27:50

내 실제 사용 사례는 우리가 우리가 그것을 처리하는 새로운 메시지를받을 때마다 우리는 전자 메일 응용 프로그램을 실행하고있다 일부 데이터 및 BQ 저장소. 우리가 메시지를받을 때마다 insertAll api를 호출하면 insertAll을 호출 할 때마다 새 메시지를받을 필요가 있다는 것을 의미합니다. insertAll을 그렇게 호출해도 괜찮습니까? –

Java 애플리케이션에서 BigQuery로 데이터를 수집하는 방법

답변

관련 문제