問題タブ [hadoop2]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
python - Hadoop で python mapreduce タスクを実行中にエラーが発生しましたか?
私はPythonで例を書いていmapper
ます。スクリプトはスタンドアロンのものとして正常に動作します。しかし、hadoop で実行するとエラーが発生します。reducer
wordcount
私は使っているhadoop2.2
これが私のコマンドです:
これを修正するには?
hadoop - hadoop 2.4.1 で namenode を開始する際のエラー
次を使用してdfsを開始しようとすると:
次のようなエラーが表示されます。
私のcore-site.xmlファイルにはこれが含まれています:
My .profile
( の置換.bashrc
) には、次の行が含まれています。
そして、次のように言って、ローカルホストを簡単にsshできます。
unit-testing - Hadoop の Maven 依存関係: MiniDFSCluster および MiniMRCluster
Hadoop MapReduce ジョブの単体テストに役立つ Maven プロジェクトを実装したいと考えています。私の最大の問題は、Maven の依存関係を定義して、テスト クラス (MiniDFSCluster と MiniMRCluster) を利用できるようにすることです。
Hadoop 2.4.1 を使用しています。何か案は?
eclipse - Eclipse のスタンドアロン モードで Hadoop2 map-reduce ジョブを実行するとエラーが発生しますか?
Eclipse で MR ジョブを実行すると、次のエラーが発生します。
これが私のcore-site.xml:
これが私のmapred-site.xml:
hadoop - スレッド「メイン」の例外 java.lang.NoClassDefFoundError: org/apache/hadoop/util/RunJar
私は基本的にリモートノードでマッドリデュースジョブを実行しようとしていますが、以下の例外に直面しています。同じ問題を経験した人はいますか?クラスパスを設定してジョブを起動するために使用しているsciptを投稿しています。