从sql server到hbase的sqoop数据遇到区域服务器死机

46qrfjad  于 2021-06-09  发布在  Hbase
关注(0)|答案(1)|浏览(259)

我正在尝试通过sqoop将数据从sqlserver导入hbase。sqoop脚本是工作的,我尝试了一个小数据,它的工作。但当我尝试使用它导入一个巨大的数据(20g)时,它显示作业已提交,Map0%,减少0%。服务器运行时间过后,作业仍处于运行状态。所以我检查了日志,它显示连接被拒绝,导致区域服务器死机,所有服务器死机。我用start hbase.sh重新启动了hbase,它运行了一段时间后就死了,我不知道该怎么办。
有人遇到这个问题吗?

thtygnil

thtygnil1#

您可以使用sqoop将数据从关系服务器导入hdfs,并使用-m/--num mappers参数指定Map器的数量

相关问题