3

新しい開発者であるHadoopアプリケーションである私は、aMap/ReduceまたはaOozieまたは Sqoopジョブの無数の構成オプションを把握するのに苦労しています。おすすめの本やサイトはどれもこれを包括的に扱っていません。Hadoopエコシステムの新しいツールはどれでももっと見ることができます。ジョブ構成オプションを理解するための最良の方法/リソースは何かを尋ねたかったのです。

4

2 に答える 2

1

私はhadoopを読みました:決定的なガイドそれは私にとって非常に役に立ちました。

さらに、Hadoopの構成プロパティを読み取るときに、それをHadoopの対応する要素に関連付ける必要があります。

で始まる他のプロパティと同様mapred.mapに、マッパータスクのプロパティを設定するために使用されるの mapred.reduceは、レデューサーの場合と同じです。

このようにして、プロパティを簡単に理解して記憶することができます。

于 2013-03-04T17:48:17.817 に答える
0

ここに、Hadoopのすべての構成があります。

https://hadoop.apache.org/docs/r2.5.1/hadoop-project-dist/hadoop-common/core-default.xml

また、現在の構成とその構成元を確認したい場合は、次のコマンドを実行してください。

$ hadoop org.apache.hadoop.conf.Configuration
于 2014-11-18T13:25:30.237 に答える