問題タブ [azure-hdinsight]

そのため、現在、次のコードを使用して MapReduce ジョブを HDInsight クラスターに送信しています。YARN で実行されるジョブを同じクラスターに送信したいと考えています。同じことを行うには、このコードをどのように変更すればよいですか? 私を導くために推奨できるチュートリアルはありますか? ありがとう！

}

テーブルに新しい列を追加したいのですが、その列がまだ存在しない場合に限ります。

これは、列が存在しない場合に機能します。

しかし、もう一度実行すると、エラーが発生します。

CREATE TABLE および ADD PARTITION でサポートされている「IF NOT EXISTS」構文を使用しようとすると、次の構文エラーが発生します。

必要なのは、この列が存在するかどうかに関係なくクエリを実行できるように、アイテムを強力に実行できるものです。

これに関するドキュメントが見つからないようです。

Thrift サービスが実行されていると思われる場合、ポート番号または URI を知っている人はいますか?

HdInsight クラスターの作成中に問題が発生しました。この機能は、私が行っている POC の基本です。

クラスターに追加のストレージ アカウントを追加しようとしています。

これが私のコードです：

すべてが正常に動作します

行がコメントアウトされました

ただし、この行がコメントアウトされていない場合、コードは Task failed 例外で失敗します。管理ポータルで、エラー ステータスのクラスターを確認できます。エラー メッセージには、内部サーバー エラーが要求を再試行するというメッセージが表示されます。

次のブログでは、まったく同じプロセスについて説明しています。

http://blogs.msdn.com/b/bigdatasupport/archive/2014/04/15/customizing-hdinsight-cluster-provisioning-via-powershell-and-net-sdk.aspx

クラスター マネージャーで [インタラクティブ JavaScript コンソール] オプションが見つかりません。どうすれば入手できますか？

入力パスに日付階層順序付けディレクトリ内の特定のフォルダーのみが含まれる map/reduce ジョブを実行しようとしています。

入力パスでまともな種類の正規表現を使用する機能がなければ、「additionalInputPath」が勝者のように見えました。

問題は、ジョブが追加の入力パスを無視しているように見え、元の入力パスでのみ実行されることです。

誰かがこれに出くわしました/何か提案はありますか? inputPath を "/input/2014/08/ / " および "/input/2014/09/ / " に制限するより良い方法はありますか (つまり、"/input/2014/01/ / " から "/input/2014 を無視します) /07/ / ")

Oozie ワークフローで一連のステップを実行しようとしています。手順の 1 つは、job.properties.template ファイルから引数を読み取る Java プログラムを実行することです。Azure HDInsight クラスターでこれをスケジュールするにはどうすればよいですか (既にクラスターを実行しています)。

また、EMR クラスターのマスター ノードに SSH 接続する方法のように、HDInsight クラスターのヘッド ノードにアクセスする方法はありますか。RDP (リモート デスクトップ プロトコル) についてどこかで読みました。誰かがこれに関連するいくつかの指針を与えることができれば役に立ちます。

Microsoft Azure クラウドの HDInsight で実行されている HBase に tsv ファイルを読み込もうとしています。リモート デスクトップ経由で接続し、コマンド ラインで実行している推奨される方法を使用して、hdfs から hbase t1 テーブルに t1.tsv ファイル (2 つのタブで区切られた列) を読み込もうとしています: C :\apps\dist\hbase-0.98.0.2.1.5.0-2057-hadoop2\bin>hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.columns=HBASE_ROW_KEY,num t1 t1.tsv

and get: エラー: 行キーとタイムスタンプ (オプション) に加えて、1 つ以上の列が必要です 使用法: importtsv -Dimporttsv.columns=a,b,c

指定された列の順序を num,HBASE_ROW_KEY C:\apps\dist\hbase-0.98.0.2.1.5.0-2057-hadoop2\bin>hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.columns= に置き換えますnum,HBASE_ROW_KEY t1 t1.tsv 取得: エラー: HBASE_ROW_KEY として正確に 1 つの列を指定する必要があります 使用法: importtsv -Dimporttsv.columns=a,b,c

これは、列リストのカンマ区切りが認識されていないか、列名が正しくないことを示しています

ここで何が間違っているのでしょうか？ありがとう。

Azure PowerShell を使用して Map-Reduce または Hive ジョブを送信すると、ジョブ構成を渡すことができることはわかっています。しかし、リモート デスクトップまたは PowerShell を介して HDInsight クラスターのプロパティを永久に変更する方法はありますか。すべてのジョブに適用されるように、いくつかの構成変更を行う必要があります。

私は Azure HDInsight で HBase を実行しており、ブラウザーでhttps://my_claster_name.azurehdinsight.net/hbaserestを介して HBase Rest API にアクセスできます。Simba HBase ODBC ドライバーを構成して、HBase インストールに接続しようとしています。

エラー: [Simba][HBase] (20) HTTP API のエラー: サーバーに接続できませんでした

ホストについては、my_claster_name.azurehdinsight.net/hbaserest を試し、my_claster_name.azurehdinsight.net だけを試しました。ポートには 8080 と 80 も試しました。何か案は？