問題タブ [hadoop2]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
93 参照

python - Hadoop で python mapreduce タスクを実行中にエラーが発生しましたか?

私はPythonで例を書いていmapperます。スクリプトはスタンドアロンのものとして正常に動作します。しかし、hadoop で実行するとエラーが発生します。reducerwordcount

私は使っているhadoop2.2

これが私のコマンドです:

これを修正するには?

0 投票する
4 に答える
8313 参照

hadoop - hadoop 2.4.1 で namenode を開始する際のエラー

次を使用してdfsを開始しようとすると:

次のようなエラーが表示されます。

私のcore-site.xmlファイルにはこれが含まれています:

My .profile( の置換.bashrc) には、次の行が含まれています。

そして、次のように言って、ローカルホストを簡単にsshできます。

0 投票する
2 に答える
4326 参照

unit-testing - Hadoop の Maven 依存関係: MiniDFSCluster および MiniMRCluster

Hadoop MapReduce ジョブの単体テストに役立つ Maven プロジェクトを実装したいと考えています。私の最大の問題は、Maven の依存関係を定義して、テスト クラス (MiniDFSCluster と MiniMRCluster) を利用できるようにすることです。

Hadoop 2.4.1 を使用しています。何か案は?

0 投票する
1 に答える
1034 参照

eclipse - Eclipse のスタンドアロン モードで Hadoop2 map-reduce ジョブを実行するとエラーが発生しますか?

Eclipse で MR ジョブを実行すると、次のエラーが発生します。

これが私のcore-site.xml:

これが私のmapred-site.xml:

0 投票する
1 に答える
3591 参照

hadoop - スレッド「メイン」の例外 java.lang.NoClassDefFoundError: org/apache/hadoop/util/RunJar

私は基本的にリモートノードでマッドリデュースジョブを実行しようとしていますが、以下の例外に直面しています。同じ問題を経験した人はいますか?クラスパスを設定してジョブを起動するために使用しているsciptを投稿しています。