AWS EMR中的强制减速器

Question

如何确保EMR流式作业中只有减速器？当我创建新的Jobflow时，是否有任何方法可以从Web前端执行此操作？

Answer 1

您可以使用--arg标志在引导操作中配置Hadoop。具体到您的问题，您可以将mapred.tasktracker.reduce.tasks.maximum设置为1.

elastic-mapreduce --create --alive \ 
     --name "Configure Jobflow" \ 
     --bootstrap-actions s3://elasticmapreduce/bootstrap-actions/configure-hadoop 
     --arg mapred.tasktracker.reduce.tasks.maximum=2