問題タブ [azure-hdinsight]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
877 参照

c#-4.0 - Hadoop On Azure C#アイソトープ

HadoopOnAzure の最初のリリース時に、Microsoft は C#Isotope SDK を Azure 上の Hadoop クラスターへのプログラム インターフェイスとして提供していました。HDInsight のリリース後、これはダウンロードから削除されます。さらに、以前のバージョンの SDK を使用しようとすると、500 - 内部サーバー エラーが発生します。

このサービスが無効になっているかどうかはわかりませんか? もしそうなら、Azure 上の HDInsight クラスターとプログラムでやり取りする別の方法は何ですか?

0 投票する
1 に答える
617 参照

hadoop - Windows サーバー上の Hadoop: Windows サーバー用の HDInsight は、ドメイン コントローラーでの実行がサポートされていますか?

私のデモ マシン: Windows Server 2008 R2 があり、ドメイン コントローラーでもあります。Web Platform Installer を使用して Windows サーバー用の HDInsight をインストールしましたが、IIS の下にクラスターを管理できるサイトが表示されません。HDInsight がドメイン コントローラーでサポートされていないのでしょうか? または、確認する必要がある他の構成はありますか。ありがとう!

0 投票する
2 に答える
2011 参照

algorithm - ペアの発生をカウントするMapReduce

私はMapReduceを初めて使用しますが、次のタスクに最適なMapReduceアプローチについてご意見をお聞かせください。

次の形式の大きなドキュメントが1つあります

各行には番号のリストがあります。可能な(ペアの)数字の組み合わせを任意の行にリストしたいと思います。そして、与えられた各ペアを含む行数が必要です。

結果は次のようになります

ドキュメントには約200万行あり、約150万の異なる番号があります。そして、数えられる数の約2.5Gの異なるペアがあります。

まっすぐ進む擬似コードは次のようなものです。ドキュメントの各行のマップを呼び出す

ただし、このアプローチには2Mマッパーと2.5Gレデューサーが必要です。これはもっともらしい方法ですか?AzureでHadoopを試すことを計画しています。

0 投票する
1 に答える
754 参照

hadoop - Microsoft HDInsight ダッシュボード サービスを利用できません

HDInsight ダッシュボード サービスを開こうとすると、"Service Unavailable HTTP Error 503. The service is available" と表示されます。ローカルホストのポート番号は 8085 です。

どんな助けでも大歓迎です..

0 投票する
1 に答える
384 参照

hadoop - Web プラットフォーム インストーラー Hadoop の再インストール

Windows 8 で Web Platform Installer を使用して HDInsight (Hadoop) をインストールしましたが、インストーラーが IIS ではなく IIS Express にインストールするように設定されていることがわかりました。そのため、[プログラムの追加と削除] を使用してアンインストールしました。IIS に再インストールしたいのですが、Web Platform Installer を実行すると、すでにインストールされていると見なされ、再インストールできません (インストール ボタンが無効になっています)。

a) HPInsight を手動でインストールする方法、または b) WPI を強制的に再インストールする方法はありますか。

ところで、インストールされた機能を再計算する可能性があると考えて、WPI のキャッシュをクリアしましたが、以前にダウンロードしたパッケージから手動でインストールするために使用できたはずのインストール ファイルが削除されました。

0 投票する
1 に答える
1109 参照

windows - MapReduce ジョブの実行中にエラーが発生しました: 有効な Inet アドレスではありません

Windows で Hadoop を試してみたいと思っています。Windows 7 ノートブックに Windows Azure HDInsight プレビューを単一ノードとしてインストールしました。ダッシュボードとノードが稼働中で、HDFS が機能しています。ただし、MapReduce ジョブを実行すると、「有効な Inet アドレスではありません」というエラー メッセージが表示されて失敗します。

ジョブログを見ると、次のプロパティに Marc_Red_Data が存在することがわかります。

なんとなく名前がついたのですが、どうすれば解決できるのか途方に暮れています。これを解決する方法を知っている人はいますか?

0 投票する
1 に答える
128 参照

hadoop - データ読み込み時の HDInsight VM 初期化エラー

単一ノードの HDInsight Hadoop クラスターにデータを読み込むために、この入門サンプルを実行しようとしています。サンプルを実行すると、次のようなエラーが表示されます。

0 投票する
3 に答える
326 参照

azure - Azure上のHadoopで新しいクラスターを作成する

インターフェイスを介して新しいHadoopクラスターを作成できますが、要求に応じて新しいクラスターを作成する必要があります。新しいクラスターを作成するためのAPIが存在するかどうか誰かが知っていますか?

0 投票する
0 に答える
303 参照

sql-server - Sqoopインポートが失敗する

からデータをインポートしてからSQL ServerHDFS使用する際に問題が発生してSQOOPいます。私はWindowsプラットフォームで作業していてHDInsights、自分のマシンにインストールしました。

これはエラーです。

ヘルプが必要です。ありがとう

0 投票する
2 に答える
643 参照

web - Microsoft Web インストーラー エラー「ルート レベルのデータ」

hdinsight-preview.exe を使用して、Windows 7 64 ビット OS に hdinsight をインストールしようとしています。これは、Microsoft の Web プラットフォーム インストーラーです。カスタム フィードを MSSingleNodeInstaller.msi として指定したら、私はxmlファイルを与えることになっていると思います。この後、「ルートレベルのデータが無効です。行1、位置1」というエラーがスローされます。アンインストールして再インストールを試みましたが、成功しませんでした。起動するたびに、同じエラーがスローされます。読み取ろうとしている xml ファイル。