在Docker容器上使用Hadoop和Spark

Question

我想为我的工作使用Big Data Analytics。我已经实现了所有在容器中创建容器的docker东西。然而，我对大数据并不熟悉，并且我已经知道在速度很重要的时候，使用Hadoop for HDFS并在Hadoop上使用Spark而不是MapReduce本身是网站和应用程序的最佳方式。这将在我的Docker容器上工作吗？如果有人能指引我去某处学习更多，这将非常有帮助。

Answer 1

您可以尝试使用Cloudera QuickStart Docker Image来开始。请看https://hub.docker.com/r/cloudera/quickstart/。该Docker镜像支持Cloudera的Hadoop平台和Cloudera Manager的单节点部署。此Docker镜像也支持spark。