Apache Nifi中的数据聚合

Question

我使用Apache nifi来处理来自不同资源的数据，并且我为每个数据流都创建了独立的管道。我想结合这些数据进一步处理。有什么方法可以将数据聚合并将其写入单个文件。数据以Nifi中的flowfiles属性的形式呈现。

Answer 1

您应该使用MergeContent处理器，该处理器接受最小/最大批处理大小的配置值等，并根据所提供的合并策略将大量流文件合并到单个流文件中。