问题与火花大师webUI和事件日志

我们正在运行一个EC2集群（6x m1.xlarge）与火花1.1.0，并且一切工作正常，昨天我推出了一个新的集群（相同的规格），但火花1.3.1 我遇到eventLog.enabled的真实属性遇到与https://issues.apache.org/jira/browse/SPARK-6950中相同的行为。即使作业已经完成，webUI历史记录也无法构建它们并将它们显示为正在进行中。我检查了* .inprogress文件仍然存在。我读过JIRA中的错误报告，它说6950在1.3.1中修复了，但是我每次运行的工作都会收到这个错误，并且我看到了一个来自其他人的评论（6天前）。有任何想法吗？问题与火花大师webUI和事件日志

来源

2015-05-19 sebamontini

打到https://issues.apache.org/jira/browse/SPARK-6107。也许。 SPARK-6950被标记为不可复制 – banjara

6950它与6107不一样，在6107中它们表示它应该在1.4.0中修复，但它是关于6950（以及我遇到的问题）中的手动停止作业我运行的每一项工作，无论它是停止还是成功完成都无所谓 – sebamontini

发生在我身上的火花1.3.1

来源

2015-06-05 13:56:32

问题与火花大师webUI和事件日志

回答

相关问题