限制hadoop客户端不创建隐藏的校验和文件

41ik7eoe 于 2021-06-02 发布在 Hadoop

关注(0)|答案(1)|浏览(362)

copytolocal命令正在创建隐藏的校验和文件。有没有办法避免这种情况的产生？

hadoop hdfs Client

来源：https://stackoverflow.com/questions/41881683/restrict-hadoop-client-to-not-to-create-hidden-checksum-files

1条答案

按热度按时间

dm7nw8vv1#

除非您运行的是非常旧的版本，否则如果您选择通过传递 -crc 选项，如apachehadoop文档中显示的copytolocal命令。

> hdfs dfs -copyToLocal /LICENSE.txt

> ls -lrta
drwxr-xr-x+ 131 naurc001  SWNA\Domain Users   4.3K Jan 27 09:18 ../
-rw-r--r--    1 naurc001  SWNA\Domain Users   140K Jan 27 10:11 LICENSE.txt
drwxr-xr-x    7 naurc001  SWNA\Domain Users   238B Jan 27 10:11 ./

> hdfs dfs -copyToLocal -crc /LICENSE.txt

> ls -lrta
drwxr-xr-x+ 131 naurc001  SWNA\Domain Users   4.3K Jan 27 09:18 ../
-rw-r--r--    1 naurc001  SWNA\Domain Users   140K Jan 27 10:07 LICENSE.txt
-rw-r--r--    1 naurc001  SWNA\Domain Users   1.1K Jan 27 10:07 .LICENSE.txt.crc
drwxr-xr-x    8 naurc001  SWNA\Domain Users   272B Jan 27 10:07 ./

如果您可以选择，那么我建议运行当前版本并进行测试，以确保 -crc 选项未在任何位置传递。

赞(0）回复(0）举报 2021-06-02

我来回答

限制hadoop客户端不创建隐藏的校验和文件

1条答案

相关问题

热门标签

最新问答