Hadoop map reduceは、コンバイナーステージをサポートします。ただし、HBaseMapReduceパッケージに同様の機能が見つかりません。それは存在しますか?
2 に答える
3
入力形式としてHBaseを使用してMapReduceジョブを実行している場合、および非hbase出力形式を使用している場合も同じです。
コンバイナは、単一のマッパーの出力でのみ動作するレデューサーです。レデューサーでべき等なことだけを行う限り、次のように言うだけでレデューサーをコンバイナースロットに入れることができます。job.setCombiner(.class);
于 2011-02-03T21:09:48.313 に答える
1
job.setCombiner(.class);を使用できます。mapreduceでcombinerクラスを使用するメソッド。レデューサーはコンバイナーとしても機能します
于 2012-09-18T07:25:01.633 に答える