9

AWS 経由でマッパーのみのジョブ (ストリーミング ジョブ) を作成しようとしています。reducer フィールドは必須なので、ダミーの実行可能ファイルを指定し、 -jobconf mapred.map.tasks=0 を Extra Args ボックスに追加します。私がインストールした Hadoop 環境 (バージョン 0.20) では、reducer ジョブは起動しませんが、AWS ではダミーの実行可能ファイルが起動して失敗します。

レデューサーなし/マッパーのみのジョブを AWS で実行するにはどうすればよいですか?

4

2 に答える 2

11

レデューサー引数として cat または NONE を使用することもできます。

于 2010-02-28T06:57:51.737 に答える
0

Amazon M/R でマッパーのみのジョブを作成する方法はありません。代わりに Identity Reducer (org.apache.hadoop.mapred.lib.IdentityReducer) を使用しています。

于 2010-02-02T15:17:52.223 に答える