amazon-web-services - AWSEMRで1つのレデューサーを強制する

Question

EMRストリーミングジョブにレデューサーのみがあることを確認するにはどうすればよいですか？新しいジョブフローを作成するときに、Webフロントエンドからこれを行う方法はありますか？

Answer 1

--argフラグを使用して、ブートストラップアクションでHadoopを構成できます。特に質問に対して、mapred.tasktracker.reduce.tasks.maximumを1に設定できます。

elastic-mapreduce --create --alive \
      --name "Configure Jobflow" \
      --bootstrap-actions s3://elasticmapreduce/bootstrap-actions/configure-hadoop
      --arg mapred.tasktracker.reduce.tasks.maximum=2