hdinsight

1열

1답변

Azure HDInsight 서비스를 사용하고 있으며 테이블을 거의 만들지 않았습니다. Windows Azure PowerShell에서 Invoke-Hive "Query"명령을 사용할 때마다 작업이 열리고 30-50 초 정도 걸립니다. 나는 hadoop + 하이브가있는 일반 centos 컴퓨터에서 동일한 데이터를 가지고 있으며이 쿼리에는 각각 1 ~ 3 초

2열

1답변

하나의 스크립트를 사용하여 여러 달 동안 하이브 파티션 만들기

4 년간의 데이터가 있습니다. 마찬가지로 '2011 2012 2013 2014' 나는 한 달의 데이터를 기반으로 쿼리를 실행해야합니다. 그래서 나는 아래와 같이 파티션을 만들고있다. 'ALTER TABLE table1_2010Jan ADD PARTITION(year='2010', month='01', day='01') LOCATION 'path'

0열

1답변

기존의 외부 분할 된 테이블에서 새 하이브 테이블 만들기

거의 500 개의 파티션이있는 외부 분할 된 테이블이 있습니다. 이전 테이블과 동일한 속성을 가진 다른 외부 테이블을 만들려고합니다. 그런 다음 기존 테이블의 모든 파티션을 새로 만든 테이블에 복사하려고합니다. 아래에 내 테이블 쿼리를 만듭니다. 내 오래된 테이블은 TEXTFILE로 저장되어 있으며 새 테이블을 ORC 파일로 저장하려고합니다. 'add ja

1열

1답변

HDInsight 오류

HDInsight와 함께 Hadoop 2.2 클러스터를 사용하려면 아래 표시된 링크의 단계를 따르십시오. 에서 http://azure.microsoft.com/en-us/documentation/articles/hdinsight-get-started-30/ 의 I 내가 다음 명령에 입력 한 PowerShell에서 4 단계에 대해 수행 할 메시지를 받고 어려

0열

1답변

HDInsight에 설치 : OozieServerStatus

Oozie 서버는 예외없이 시작됩니다. 아래 명령을 사용하여 상태를 얻으려고 시도하는 중에 404 오류가 발생합니다. 서버에서 $clusterUriStatus = "https://$clusterName.azurehdinsight.net:443/oozie/v2/admin/status" $response = Invoke-RestMethod -Method Ge

2열

1답변

하이브 : 유니 코드 csv 파일의 CREATE TABLE

HDInsight 클러스터에서 유니 코드 csv 파일에 하이브 테이블을 만들려고합니다. Invoke-Hive -Query @" CREATE EXTERNAL TABLE TestUnicode(Numeric1 INT,Numeric2 INT,Numeric3 INT,Name String)ROW FORMAT DELIMITED FIELDS TERMINATED BY '

0열

2답변

HDInsight 참고 : 하이브 작업 매개 변수

Oozie scipt를 사용하여 하이브 작업을 자동화하는 과정에서 작업 중입니다. workflow.xml에서 powershell 스크립트 파일 (Oozie 작업 스크립트)에서 값을 가져올 수 있습니다. hql 파일에서 powershell 스크립트 파일 (Oozie 작업 스크립트)에 정의 된 값을 가져올 수 없습니다. 파워 쉘 스크립트 파일 : $hiveSc

1열

1답변

HDInsight에서 HQL 파일을 사용할 때 ParseExceptions

이 튜토리얼 http://azure.microsoft.com/en-us/documentation/articles/hdinsight-use-hive/을 따라갈 것이지만 파일을 사용하도록 쿼리 소스를 변경할 때 막혔습니다. Logging initialized using configuration in file:/C:/apps/dist/hive-0.11.0.1.3

0열

3답변

PowerShell을 통한 HDInsight 클러스터에 대한 RDP 액세스 활성화

PowerShell을 통해 HDInsight 클러스터를 만들고 Azure Management Portal에 로그인하여 RDP 액세스를 활성화했습니다. 그러나 PowerShell을 통해 HDInsight 클러스터에 대한 RDP 액세스를 가능하게 할 수 있는지 알고 싶었습니다. 그렇다면 몇 가지 조언을 해주십시오.

0열

2답변

.NET의 HDInsight Hive UDF

Hadoop 용 Microsoft .NET SDK가 있음을 확인했습니다. Map/Reduce 프로그램이 이제 HDInsight 용 .NET으로 작성 될 수 있음을 알게되었습니다. HDInsight에도 Hive UDF를 쓸 수있는 방법이 있습니까?