我的mapreduce程序有三个链接的mr jobs。我想从主类访问mr1输出。在hadoop环境中有可能吗?如果没有,那么请建议是否有其他方法做类似的事情。
5us2dqdw1#
一种方法是将job1的输出馈送到job2的输入,将job2的输出馈送到job3的输入。下面是一个示例:http://developer.yahoo.com/hadoop/tutorial/module4.html#chaining本博客还讨论了以下内容:http://blogs.msdn.com/b/avkashchauhan/archive/2012/03/29/how-to-chain-multiple-mapreduce-jobs-in-hadoop.aspx
1条答案
按热度按时间5us2dqdw1#
一种方法是将job1的输出馈送到job2的输入,将job2的输出馈送到job3的输入。
下面是一个示例:http://developer.yahoo.com/hadoop/tutorial/module4.html#chaining
本博客还讨论了以下内容:
http://blogs.msdn.com/b/avkashchauhan/archive/2012/03/29/how-to-chain-multiple-mapreduce-jobs-in-hadoop.aspx