我想知道distcp是否可以选择在从一个集群传输到另一个集群时加密数据。我知道它确实支持s3集群中的加密,但这与amazon的s3有关。如果我们将纯文本文件从一个集群移动到另一个集群呢。它是加密的还是纯文本的?我们能启用这样的加密吗,如果它支持的话?
pgky5nke1#
来自hdfs文档:一旦设置了kms并且正确配置了namenode和hdfs客户机,管理员就可以使用hadoop密钥和hdfs crypto命令行工具来创建加密密钥并设置新的加密区域。通过使用distcp等工具将现有数据复制到新的加密区域,可以对其进行加密。希望有帮助。
1条答案
按热度按时间pgky5nke1#
来自hdfs文档:
一旦设置了kms并且正确配置了namenode和hdfs客户机,管理员就可以使用hadoop密钥和hdfs crypto命令行工具来创建加密密钥并设置新的加密区域。通过使用distcp等工具将现有数据复制到新的加密区域,可以对其进行加密。
希望有帮助。