Spring-XD spring应用程序的大数据

Question

我是Spring-XD的新手，只有基本的想法，它有助于将大量数据存储在hadoop中作为文件。我想开发我的应用程序来保存使用Spring-XD到hadoop的套接字的数据。

这可能吗？ 如果是的话，任何人都可以指出我已经完成的一些例子吗？ 请不要将我重定向到https://github.com/spring-projects/spring-xd。它不包含任何如何将文件写入hadoop和hadoop连接配置的示例。

在此先感谢。

Answer 1

您可能会考虑使用Spring Cloud Data Flow，因为它是Spring XD的继任者。根据您是否需要从HDFS读取/写入HDFS，您可以使用hdfs源/接收器应用程序。

您仍然可以试用Spring XD示例here以获得一个想法。