在hadoop中创建的mappers的数量

Question

要计算作业跟踪器将创建的mappers的数量很容易理解。它基本上是hdfs文件的大小除以分割大小。因此，如果hdfs文件的大小为640MB，分割为64MB，则作业跟踪器将创建10个映射器。但是有时创建的mappers的数量比你期望的要多。当作业完成后，我会查看屏幕上的相片，以了解创建的制图人数。

我的问题是以下几点：是否可以理解为什么更多的映射器创建，也许通过查看不同的日志？

注意：我有一个地图缩减工作和相同的工作，当在不同的时间执行报告不同的地图工作者。尽管创建的额外映射器并不是很大。

Answer 1

我在阅读作业跟踪器生成的日志后发现，额外的映射器是在已经分配的映射器需要很长时间才能完成时创建的，这些映射器只是散布者。

Hadoop的分配时，这样的任务，但它确实是如下： attempt_200707121733_0002_m_000005_1

这意味着作业服务器目前正试图分配五号地图任务作业2月1日任务的尝试。任务尝试从0开始。