2
hadoop中的地图任务在输入文件的64/128 MB分割中工作。它从输入分割的第一行开始处理直到结束。我需要了解如何知道地图任务何时完成处理其输入拆分。换句话说，在洗牌和分类开始之前。 hadoop库中有什么方法可以回答我的问题吗？在hadoop Map-Reduce中，如何知道地图任务结束或文件分割结束
A
回答
5
Mapper类的cleanup方法允许您在完成处理输入拆分后的映射器时执行代码，只需以覆盖map方法的相同方式覆盖它即可。
如果这不是你想要的，也许Counter可以解决你的问题？
相关问题
- 1. 如何知道堆结束的地址？
- 2. 如何知道流已经结束C＃
- 3. 如何知道Optaplanner求解已结束？
- 4. 如何知道http响应结束？
- 5. 如何知道插件在CRM 2016中何时结束？
- 6. 如何知道任意数量的异步操作的结束
- 7. 任务结束[C＃UWP]
- 8. Backgroundrb计划任务结束
- 9. 结束任务管理器
- 10. Transloadit任务永不结束
- 11. 如何正确结束吞噬任务
- 12. 如何批量结束任务？
- 13. HTML5 WebSQL：如何知道db事务何时结束？
- 14. 任务结束后的处理结果
- 15. Hadoop作业刚刚结束
- 16. 当后台任务结束时，ios是否有任何通知？
- 17. C＃结束任务没有结束进程
- 18. 字符串分割多结束符
- 19. php substr - 知道结束html标签吗？
- 20. 执行任务（iOS中）动画结束
- 21. 如何知道线程在.NET Compact Framework上何时结束？
- 22. 应该返回任务结束与任务或异步
- 23. 你是如何运行吞吐“结束”任务，但只在当前任务结束？
- 24. 任何人都知道如何在游戏结束时保存这种名字？
- 25. （QT/kdelib）如何知道KTerminalInterface中命令的结束？
- 26. 如何知道音频中断未收到AVAudioSessionInterruptionTypeEnded而结束？
- 27. 如何知道Unity中动画的结束坐标？
- 28. Hadoop如何分割文件？
- 29. 如何知道何时在Unity中使用c结束文本的句子＃
- 30. 文字结束和图像