問題タブ [hadoop2]

Hadoop 2.2.0 を疑似分散モードでインストールしようとしています。データノード サービスを開始しようとすると、次のエラーが表示されます。これを解決する方法を教えてください。

copyfromlocalサンプルデータをコピーするために実行しようとしている間に、2.2.0 疑似モードをインストールしようとしました

私は現在、宛先パスで/inputを使用しました- bin/hadoop fs -copyFromLocal /home/prassanna/Desktop/input /input のように

今はうまくいっていると思いますが、以下を使用してファイルを確認し ました 。該当するビルトイン Java クラス 1 個のアイテムが見つかりました -rw-r--r-- 1 ルート スーパーグループ 64 で、データノードの uI もチェックインしましたが、表示される使用率は '0' のみですが、いくつかの kb を表示する必要があります( 64) ファイルの正しい?入力ファイルが正しく hdfs にコピーされていることを教えてください?** そして、ファイルが物理的にローカル マシンのどこに保存されているか教えてください?この混乱を解決するのを手伝ってください.事前に感謝します

アプリケーションを hadoop 1.0.3 から hadoop 2.2.0 に移行していますが、maven ビルドには依存関係としてマークされた hadoop-core がありました。hadoop-core は hadoop 2.2.0 には存在しないためです。hadoop-client と hadoop-common に置き換えてみましたが、ant.filter でまだこのエラーが発生します。誰が使用するアーティファクトを提案できますか?

エラー：

Ubuntu に Hadoop の単一ノード セットアップをインストールしようとしています。Hadoop 2.3 docsの指示に従い始めました。

しかし、私は非常に単純なものが欠けているようです。

まず、それは言う

Hadoop ディストリビューションを入手するには、Apache Download Mirrors のいずれかから最新の安定版リリースをダウンロードします。

それで、

ダウンロードした Hadoop ディストリビューションを解凍します。ディストリビューションで、ファイル conf/hadoop-env.sh を編集して、少なくとも JAVA_HOME が Java インストールのルートになるように定義します。

confただし、ディレクトリが見つからないようです。

ミラーの 1 つで2.3 のリリースをダウンロードしました。次に、tarball をアンパックするlsと、内部の 1 つが返されます。

confディレクトリ内ではなく、参照しているファイルを見つけることができました。

何か不足していますか、それとも間違ったパッケージを取得していますか? それとも、ドキュメントが古くなっていますか?

もしそうなら、誰か最新のドキュメントがどこにあるか知っていますか?

ファイル new.txt は確かに利用可能です。hdfsのディレクトリに移動しようとすると、ファイルが存在しないと表示される理由がわかりません。

PS: 私はすでに hdfs というディレクトリを作成しました:

mapreduce プログラムの 1 つで、new Text()context.write 中に使用していました。

上記のステートメントを使用しているため、 Text オブジェクトがどのように格納され、メモリ管理がどのように処理されているかを知りたいです。また、どのオブジェクトからも参照されなくなった後のオブジェクト値の存在についても知りたいです。

これについて教えてください。