2015-03-13 71 views
0

纵观我的任务日志,我注意到所有的映射器任务3秒多后完成:为什么hadoop mapper任务的持续时间总是3秒的倍数?

enter image description here

当我查看日志一段较长的运行作业看到同样的事情:

这背后的原因是什么?

+4

运行,检查所有映射是完整的守护进程运行一次,每3秒... – 2015-03-13 19:13:41

+0

那不可能的情况下因为任务'0000001'和'0000002'分开2秒完成 – slayton 2015-03-13 19:31:24

+0

每个映射器都会启动一个单独的守护进程。它检查。睡3秒,检查等我不能编辑我的评论,从所有到... – 2015-03-13 19:33:30

回答

1

因为在旧版本的Hadoop Task.PROGRESS_INTERVAL是硬编码为3000毫秒