的Lucene索引与搜索地图/缩小

Question

可能重复：
instant searching in petabyte of data…

如何使用Hadoop的的Map/Reduce在Lucene的索引和搜索?????

Answer 1

我能找到你是Katta最接近的事：

凯塔是许多商品硬件服务器非常相似的Hadoop MapReduce的，Hadoop的DFS，HBase的，Bigtable的或Hypertable的运行分布式应用程序。

（...）

凯塔支持分布式得分为其Lucene的实现 - 这是因为我们不希望这个词分布在所有碎片完全平衡。

在Katta中完成的每个搜索查询最终都是两个网络往返：首先我们从所有节点获取查询的文档频率，然后在第二个节点将此值和搜索查询传递给所有节点。请注意，我们还提供了一种简单的计数方法，只计算匹配查询的文档，但在一次网络往返中进行。