如何：增加Lucene .net索引速度

Question

我正在尝试创建大约200万条记录的lucene。索引时间大约为9个小时。 你能否建议如何提高性能？

Answer 1

提高Lucene索引性能的最简单方法是调整IndexWriter的mergeFactor实例变量的值。这个值告诉Lucene将多少个文档存储在内存中，然后再将它们写入磁盘，以及将多个段合并在一起的频率。

http://search-lucene.blogspot.com/2008/08/indexing-speed-factors.html

Answer 2

我写了一篇关于如何并行Lucene索引一个可怕的职位。它真的写得非常糟糕，但你会发现它here（有一些示例代码，你可能想看看）。

无论如何，主要的想法是你把你的数据分成大块，然后在单独的线程上工作。当每件作品完成后，你将它们全部合并成一个索引。使用上述方法，我能够索引约4百万条记录。 2小时。

希望这给你一个从这里走的想法。

Answer 3

除了写入方面（合并因子）和计算方面（并行化）之外，这有时是由于最简单的原因：输入缓慢。许多人从数据库建立Lucene索引。有时候你发现这个数据的特定查询过于复杂而且速度很慢，无法很快返回所有（200万？）记录。尝试只查询和写入磁盘，如果它仍然在5-9小时的顺序，你已经找到了一个优化的地方（SQL）。

Answer 4

下面的文章真的帮了我，当我需要加快速度：

http://wiki.apache.org/lucene-java/ImproveIndexingSpeed

我发现，文献建设是我们的主要瓶颈。在优化数据访问和实施其他一些建议之后，我大大提高了索引性能。