新しい開発者であるHadoopアプリケーションである私は、aMap/Reduce
またはaOozie
または Sqoop
ジョブの無数の構成オプションを把握するのに苦労しています。おすすめの本やサイトはどれもこれを包括的に扱っていません。Hadoopエコシステムの新しいツールはどれでももっと見ることができます。ジョブ構成オプションを理解するための最良の方法/リソースは何かを尋ねたかったのです。
質問する
262 次
2 に答える
1
私はhadoopを読みました:決定的なガイドそれは私にとって非常に役に立ちました。
さらに、Hadoopの構成プロパティを読み取るときに、それをHadoopの対応する要素に関連付ける必要があります。
で始まる他のプロパティと同様mapred.map
に、マッパータスクのプロパティを設定するために使用されるの mapred.reduce
は、レデューサーの場合と同じです。
このようにして、プロパティを簡単に理解して記憶することができます。
于 2013-03-04T17:48:17.817 に答える
0
ここに、Hadoopのすべての構成があります。
https://hadoop.apache.org/docs/r2.5.1/hadoop-project-dist/hadoop-common/core-default.xml
また、現在の構成とその構成元を確認したい場合は、次のコマンドを実行してください。
$ hadoop org.apache.hadoop.conf.Configuration
于 2014-11-18T13:25:30.237 に答える