google-bigquery

2열

1답변

다음 쿼리를 사용하여 하루에 재고 잔액을 계산했습니다. 쿼리가 작동하고 예상되는 결과를 얻을 수 있지만 약 2mio 행을 사용하여 트랜잭션 테이블의 하위 집합에서 실행하는 데 200 초 이상 걸립니다. bigquery를 처음 사용하는 사람들에게 더 나은 /보다 효율적인 방법이 있는지 궁금합니다. 일부 샘플 데이터가있는 코드는 다음과 같습니다. 미리 감사드립

0열

1답변

Datalab to BigQuery - SQL에 변수 값 삽입

Google Datalab - BigQuery magic 명령을 사용하여 데이터 랩 노트북을 통해 BigQuery 테이블에 데이터를 삽입하려고합니다. 이 코드를 실행하면 테이블에 나타나는 데이터가 올바르게 작동합니다. INSERT mydataset.sampletable (word, count) VALUES('testing', 7) 그러나, 나는 그때

1열

2답변

Spark AVRO with BigQuery

Avro 형식의 Google 스토리지에 저장된 것과 동일한 데이터를 사용하여 하이브에 외부 테이블을 만들고 BigQuery에 다른 테이블을 만들려고합니다. 내가-스파크 브로 4.0.0 하이브, 스파크 2.2.0으로 통해 Dataproc 클러스터를 사용하고 2.1.1 이 아 브로 버전/패키지와 같은 차이가 있지만 내가 하이브를 사용하여 테이블을 작성하는 경우

0열

2답변

열의 배열 값 요약

내 직업은 여러 배열의 값을 요약하여 처리해야하며 지식이 부족합니다. 이 그룹의 통찰력과 도움은 크게 감사하겠습니다. 도전 : I 단일 컬럼의 BigQuery 테이블 내의 각 행 TLD의 도메인의 배열을 갖는다. 각 TLD별로 그룹화하고 각 TLD의 총 수를 새 테이블로 반환하고 싶습니다. 도움에 미리 ["biz","us","international","e

-1열

1답변

BIgQuery는보고 GUI에 적합한 백엔드입니까?

bigquery는 엄청난 양의 데이터를 쿼리하는 데 유용합니다. 내가 잘 모르는 것은보고 GUI에 대한 응답 성입니다. Google 애널리틱스와 같은 것을 구축하고 있다고 가정 해 보겠습니다. 그리고 특정 차원/필터를 사용하여 페이지 뷰 데이터를 저장하고 쿼리해야합니다. 그리고이 웹 응용 프로그램 GUI를 고객에게 노출해야하므로 응답 시간은 초당 <이어야합

0열

1답변

.httr-oauth 파일로 인해 Windows 작업이 실패합니다.

Windows 작업 관리자를 사용하여 작업을 프로그래밍했습니다. bigrquery 라이브러리를 통해 BigQuery 데이터에 액세스하는 것으로 구성됩니다. 내 자격 증명을 로컬 파일 httr-oauth에 저장했습니다. 나는이 라이브러리를 사용하고 있습니다 : 작업은 몇 주 동안 일하고있다 library(bigrquery) library(assertthat

0열

1답변

액세스 로그 용 BigQuery API - 데이터가 손실됩니다.

MySQL 테이블에 대한 액세스 로그를 가지고 있지만 최근에는 MySQL에 너무 많이 사용되었습니다. 그런 다음 Google BigQuery에 저장하기로 결정했습니다. 나는 그것이 더 나은 선택인지 모른다. 그러나 그것은 실행 가능하게 보인다. 누구나 그것에 대해 의견이 있으십니까? 좋습니다 ... Google BigQuery에 통합하기 시작했습니다. Fl

0열

1답변

Bigquery의 분할 된 테이블에 쿼리 삽입

Bigquery에서 마이그레이션 할 하이브로 작성된 삽입 쿼리가 있습니다. 예 : BigQuery에서 insert into test.abc partition(yrmth) select * from test.xyz 는 파티션은 YYYYMMDD 형식으로지지된다. 내가 BQ 명령 줄 도구를 통해 test.abc$20171125로드하여 파티션 테이블에 데이터를

0열

1답변

bigquery 쿼리 비용 계산 방법 확인

BigQuery의 쿼리 비용을 평가할 때 알아야 할 사항을 다시 확인하고 싶습니다. TB 당 $ 5라는 가격 인 TB here의 가격이 발견되었지만 정확히 1TB는 무엇입니까? 관련 번호가되는 BigQuery의 UI 출력 결과 이상이 될 것이다 (중요 듯 전에) 나는 지금까지 가정 한 예 쿼리에 대한 너무 : ...이에 케이스 2.34GB. 따라서 1 테라

1열

2답변

Google Data Studio : Google BigQuery 데이터 커넥터를 사용하여 맞춤 측정 기준을 필터로 적용

기술적 인 측면이 제한 될 수 있으므로 Stackoverflow가이 질문에 적합한 플랫폼인지 모릅니다. BigQuery 데이터 커넥터 'ga_sessions_YYYMMDD'연결을 사용하여 대시 보드를 설정하고 있습니다. 이 연결에는 BigQuery Console에서 액세스 할 수있는 Google 애널리틱스에서 설정 한 몇 가지 맞춤 측정 기준이 있으므로 데