将hadoop集群从big insights迁移到cloudera

rqmkfv5c  于 2021-06-01  发布在  Hadoop
关注(0)|答案(1)|浏览(312)

将大小为1 tb的群集从big insights迁移到cloudera的最佳方法是什么。
cloudera是一个kerborized集群。
我们目前采用的方法是分批处理:a。获取集群并将其移动到unix文件系统
b。scp到cloudera文件系统
c。从cloudera文件系统转储到cloudera hdfs
这不是一个有效的方法

roejwanj

roejwanj1#

distcp确实适用于kerberized集群
但是,还不清楚您实际拥有的333gbx3副本是1tb还是1tb的原始数据。
无论哪种情况,您都非常欢迎购买外部4tb(或更多)驱动器和 copyToLocal 集群上的所有文件,然后上传到其他任何地方。

相关问题