Hadoop Data Persistance使用哪种格式？

Question

1. 我有一些Lucene的经验，我想了解数据是如何实际存储在Hadoop框架的从服务器中的？

2. 我们是否在Slave服务器中创建了一组索引来描述我们存储的文档？它在现实中如何运作？

Answer 1

数据被拆分成特定大小的块，然后复制到群集中的其他节点以获得可靠性。这个过程由一个单一的“名称节点”来处理，它跟踪哪些数据块已经到达哪里。

的Hadoop提供了一个虚拟文件系统，类似于Unix的，您可以查询使用各种Hadoop filesystem tools（LS，GET，PUT等）

This link应该给你一个全面的概述。