hadoop—将数据从网关节点复制到同一网络中的不同群集

hpxqektj  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(579)

在同一个网络中,是否有一种方法可以将数据从集群1中的网关节点直接复制到集群2的hdfs。目前我正在对集群2的网关节点执行scp,并将数据上载到hdfs。
谢谢,

2uluyalo

2uluyalo1#

你可以这样做:

hadoop fs -put [local_file] hdfs://[namenode2]:[namenode2_port]/[path]

假设:
[本地\u文件]是群集1中网关节点中的文件
[namenode2]是集群2的namenode
[namenode2\u port]是群集2的namenode端口
[path]是hdfs中放置文件的路径

相关问题