0
Spark中断并执行代码到stage.I也知道它是一个进度条，它提供有关Spark中的staging部分的信息。当作业在群集上运行时，我们可以从控制台中以下行中的数字获得什么信息。在作业运行时解释控制台中的Apache Spark stage progress bar
[阶段133：（4000 + 4）====>（1 + 1）/ 13000]
A
回答
1
进度条指示[Stage 133:(4000 + 4) ====> (1 + 1)/13000]
(numCompletedTasks + numActiveTasks)/totalNumOfTasksInThisStage]
完成的任务数= 1
活动任务数= 1
在这个阶段的任务总数= 13000
请参阅here的细节
相关问题
- 1. 减少Apache Spark作业/应用程序的运行时间
- 2. Spark流作业调度控制执行？
- 3. CSS circle-progress-bar
- 4. Progress Bar and gevent
- 5. 长时间运行ETL过程 - 后台作业，Spark，Hadoop
- 6. Java Progress Bar远程执行
- 7. 在后台运行作业
- 8. Unicode和控制台解释
- 9. 在Unix中的后台运行作业
- 10. Apache zepplin的点火作业运行速度比spark-submit
- 11. 如何获得Apache Spark作业的DAG而不运行它？
- 12. 在Rails 3中运行后台作业
- 13. Apache spark的访问控制
- 14. AJAX Progress Bar - 投票，Comet？
- 15. 在后台运行Cron作业脚本并运行15小时
- 16. 无法在Scala控制台导入jar来运行spark程序
- 17. 在Docroot中运行的Drupal控制台
- 18. 运行时解释
- 19. 呼叫./.../bin/spark-submit pythonfile.py在Eclipse（Pydev的）控制台上运行时程序
- 20. 如何在控制台应用程序中成功运行Hangfire MemoryStorage作业？
- 21. 从控制器的Symfony3控制台运行控制台命令
- 22. 我可以在Oozie中运行py spark作为shell作业吗？
- 23. 在后台运行异步作业（laravel）
- 24. 从控制台运行symfony动作
- 25. 在控制台中运行项目
- 26. 在控制台中运行JAR
- 27. 在生产中运行Rails控制台
- 28. 在控制台中运行jar
- 29. 如何从Apache Spark作业中将空字符串写入弹性搜索时解决错误？
- 30. 控制台关闭时运行代码？