問題タブ [azure-hdinsight]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - Hadoop HDInsight 開発者プレビュー ハイブ リンク サーバー
こんにちは、次のスキーマを使用して、ログ ファイルから HDInsight Developer Preview に Hive テーブルをセットアップしました。
Hive DSN とリンク サーバーを設定しました
しかし、文字列を選択すると(整数は問題ないようです)、次のようになります。
リンク サーバー "hive-test" の OLE DB プロバイダー "MSDASQL" から、"要求された変換はサポートされていません" というメッセージが返されました。メッセージ 7341、レベル 16、状態 2、行 1 リンク サーバー "hive-test" の OLE DB プロバイダー "MSDASQL" から列 "[MSDASQL].sip" の現在の行の値を取得できません。
これをトラブルシューティングする方法を知っている人はいますか。
azure - サンプルの Azure Hadoop ジョブを Web UI またはクロスプラットフォーム CLI で作成しますか?
HDInsight を使用して Azure で Hadoop を操作しようとしていますが、新しく作成したクラスターで Hadoop ジョブを実行する方法について少し混乱しています。ここまでで、HDInsight クラスターを作成し、それにストレージ アカウントをアタッチしました。また、ローカルの OS X ボックスに azure-cli をインストールしています。
Hadoop ジョブの起動に関するAzure チュートリアルがありますが、PowerShell を使用しています。これは、 Azure クロスプラットフォーム CLI経由では利用できないと思います。
Windows VirtualBox の起動以外に、Azure Web UI (Amazon EMR が提供するものなど) または OS X と互換性のあるその他のコマンド ライン引数を介してジョブを作成できますか?
ありがとう
azure - Copyfromlocal hdinsight from blob
I am just getting started with HDInsight. I have some files stored in Azure storage that I want to copy into HDFS. I am trying to use fs -copyFromLocal. When I copy from the C Drive it works OK when I try to copy from blob storage using a wasb path to the blob container I get a wrong FS error. I suspect copy from Local is the wrong tool. How do I copy from a container to HDFS.
azure - Azure HDInsight で実行されている piggybank.jar 経由で PIG を使用して Avro ファイルを読み取れない
ローカルおよび Hortonworks で完全に実行されるいくつかの既存の PIG スクリプトを HDInsights に移植しようとしていますが、Pig の piggybank (piggybank は HDInsight ディストリビューションに含まれています) を介して Avro ファイルを読み取ろうとすると、class not found エラーが発生します。
他の誰かが Avro を HDInsight で動作させたり、回避策を持っているかどうか疑問に思います (たとえば、どの jar をどこにコピーしますか?)
詳しくは... これをたどると、Azure HDInsight インスタンスのリモート ターミナル経由で PIG を直接実行しました。
私が見るエラーは次のとおりです: java.lang.ClassNotFoundException: org.json.simple.parser.ParseException
これは、 https: //code.google.com/p/json-simple/ の json-simple ライブラリだと思います
これを HDInsight VM のいくつかの場所に追加しようとしました (そしてライブラリを明示的に PIG に登録しました) が、それでもエラーが発生します。
このエラーは、RDP によって、HDinsight Azure インスタンスのデスクトップの Hadoop コマンド ライン プロンプトで簡単に再現できます。
詳細でPIGを開始します...
AvroStorage を使用して任意の行を入力します。例えば
例外を取得...
c# - .NET から HDInsight で Hive ジョブを呼び出そうとしています
C# から Hive クエリを実行するために、このサンプルを使用しています。次のエラーが表示されます。
powershell - Use-AzureHDInsightCluster がエラーをスローする
Use-AzureHDInsightCluster powershell コマンドレットを使用しようとしています
しかし、次のエラーが発生します。私はこれが初めてなので、どこから始めればよいかわかりません。
編集デバッグフラグを追加しました。もう少し情報が得られます