我的map reduce作业将最终结果写入序列文件。有没有什么有效的方法可以找到给定密钥的序列文件？
kdfy810k1#
如果从Map器发出的键与reducer中输出的键相同，则可以通过使用的分区器（哈希分区器是默认值）运行seach键，并传递该键和作业最初运行的reducer数。这将为您提供密钥发送到的减速机编号，以及包含它的part-r-xx文件。
1条答案
按热度按时间kdfy810k1#
如果从Map器发出的键与reducer中输出的键相同，则可以通过使用的分区器（哈希分区器是默认值）运行seach键，并传递该键和作业最初运行的reducer数。这将为您提供密钥发送到的减速机编号，以及包含它的part-r-xx文件。