1

Hadoop 0.23.0に容量スケジューラを追加し、サンプルのpi、randomwriterプログラムを実行しようとしています。

すべてのデーモンは正​​常に動作していますが、ジョブがハングし、出力が表示されなくなります。

蓄積されたログが見れませんでした。誰かがこの仕事の中断の理由とログが保存されている場所を教えてもらえますか？

2012-06-08 18:41:06,118 INFO  mapred.YARNRunner (YARNRunner.java:createApplicationSubmissionContext(355)) - Command to launch container for ApplicationMaster is : $JAVA_HOME/bin/java -Dlog4j.configuration=container-log4j.properties -Dyarn.app.mapreduce.container.log.dir=<LOG_DIR> -Dyarn.app.mapreduce.container.log.filesize=0 -Dhadoop.root.logger=INFO,CLA -Xmx1536m org.apache.hadoop.mapreduce.v2.app.MRAppMaster 1><LOG_DIR>/stdout 2><LOG_DIR>/stderr 
2012-06-08 18:41:06,251 INFO  mapred.ResourceMgrDelegate (ResourceMgrDelegate.java:submitApplication(304)) - Submitted application application_1339151256291_0003 to ResourceManager
2012-06-08 18:41:06,355 INFO  mapreduce.Job (Job.java:monitorAndPrintJob(1207)) - Running job: job_1339151256291_0003
2012-06-08 18:41:07,366 INFO  mapreduce.Job (Job.java:monitorAndPrintJob(1227)) -  map 0% reduce 0%
4

1 に答える 1

1

http://www.thecloudavenue.com/search?q=0.23の指示に従い、小さな 3 ノード クラスターで Hadoop-0.23.4 を正常に実行しました。

のログ ファイルを確認します。

$HADOOP_HOME/ログ

マスターとスレーブのエラーのフォルダ。

次のコンソールを確認します

//master:50070/dfshealth.jsp

DataNodes の数が正しいかどうかを確認します

//master:50070/dfsnodelist.jsp?whatNodes=LIVE

NodeManagers の数が正しく報告されているかどうかを確認します

//マスター:8088/クラスター

また、NodeManager の数も正しく指定する必要があります。

//マスター:8088/クラスター/ノード

NameNode Web コンソールを使用して、適切な内容の出力フォルダーが作成されていることを確認します。

//master:50070/nn_browsedfscontent.jsp

于 2012-11-14T00:19:56.083 に答える