hadoop—通过分布式缓存访问pig中的文件

0ejtzxu1  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(353)

我看了很多关于stackoverflow的页面。但我还是很困惑。即使这是一个重复的问题或类似的问题,请回答
我想将pig中的一个文件与另一个文件进行比较,并希望其中一个文件位于分布式缓存中,以便每个Map器都在本地拥有它。如何在pig中实现。

x33g5p2x

x33g5p2x1#

使用以下命令

set mapred.cache.files /new_file_location/new_file.txt#new_file.txt

运送到每个Map器运行的位置。

相关问题