我看了很多关于stackoverflow的页面。但我还是很困惑。即使这是一个重复的问题或类似的问题,请回答我想将pig中的一个文件与另一个文件进行比较,并希望其中一个文件位于分布式缓存中,以便每个Map器都在本地拥有它。如何在pig中实现。
x33g5p2x1#
使用以下命令
set mapred.cache.files /new_file_location/new_file.txt#new_file.txt
运送到每个Map器运行的位置。
1条答案
按热度按时间x33g5p2x1#
使用以下命令
运送到每个Map器运行的位置。