Importtsv没有加载所有记录

Question

我从Java类中调用了importtsv，并且由于某种原因它没有加载所有的记录。不知道这是一个实际的importtsv问题还是我正在做的事情。

详情：

我想因为它是被抓获加载批量数据。所以，我正在写入一个临时文件，没有其他数据和每个X记录，我调用importtsv将数据加载到HBase中。

我已经改变了节目叫“WC -l”来仔细检查我把正确的记录数在临时文件中，一切看起来不错。所以，无论是importtsv出错还是出于某种原因都有无效的记录没有进入，但我不知道它在哪里被记录。

想法？即使我可以找到记录错误的地方，那也是很棒的。

Answer 1

没关系......事实证明我在我的数据有重复的记录。