特设报告Hadoop

Question

嘿家伙， 我想允许人们输入简单的文本搜索条件，运行猪工作（如果这是最好的，这是我最了解的）并输出结果（tsv文件结果？）所以我可以在Web界面中显示它们。

有什么解决这个问题的？ 任何已知的事情都会将我想要的流程的几个不连贯的部分连接在一起？

谢谢，

Answer 1

为什么不将索引文件编入Lucene或Solr？然后您可以实时进行文本搜索。 Hadoop是专为面向批处理的流程而设计的，在这种情况下，它看起来并不像你想要的那样。

Answer 2

那么，这取决于你的项目的要求。它是否需要低延迟，以及特别搜索有多复杂。那么我认为hbase +猪可能是一个解决方案。 hbase可以用于搜索实时搜索目的（虽然其搜索功能不如RDBMS强大），并且可以用于批量处理大量数据。