2015-12-22 71 views
0

我想通过sqoop将数据从sql server导入到hbase。 sqoop脚本是工作,我尝试了一个小数据,它的工作。 但是当我试图使用它导入一个巨大的数据(20G) 首先它显示作业已提交,映射0%,减少0%。 服务器时间过后,作业仍处于运行状态。 所以我检查日志,它显示连接被拒绝,导致区域服务器死机,所有服务器都死机。 我用start-hbase.sh重新启动了hbase,并且它工作了一段时间然后死了,我不知道该怎么做。从sql服务器到hbase的sqoop数据遇到区域服务器死亡

有人遇到这个问题吗?

回答

0

您可以使用sqoop将数据从关系服务器导入到HDFS,使用参数指定映射器的数量-m/- num-mappers