在hadoop-examples.jar中，我知道对于terasort，我们可以使用teravalidate来验证输出。有没有类似的方法来验证排序示例的输出？
另外，我尝试使用teravalidate验证排序输出，但它给了我一个错误。
下面是teravalidate的输出，
> error misorder in part-00001 last: ';:widdl' current: ')(winga'
> error misorder in part-00001 last: 'scrat bact' current: 'FEBassa'
> error misorder in part-00001 last: 'FEBassa' current: '?>Fouqu'
> error misorder in part-00001 last: '?>Fouqu' current: '=<Itali'
> error misorder in part-00001 last: 'shola spec' current: 'XWLemur'
> error misorder in part-00001 last: 'biventer L' current: '43Mesua'
> error misorder in part-00001 last: 'ploration ' current: 'pinulus ar'
> error misorder in part-00001 last: 'pinulus ar' current: 'hgShiah'
> error misorder in part-00001 last: 'pendulant ' current: '/.Tamil'
> error misorder in part-00001 last: '`_Whilk' current: '54Yanni'
> error misorder in part-00001 last: 'ribaldrous' current: 'cinque cha'
1条答案
按热度按时间dojqjjoe1#
我刚查过teravalidate只对terasort有效。没有标准作业来验证sort的输出。
这就是terasort被用于大多数基准测试工作的原因，因为它自己拥有所有的teragen、terasort和teravalidate。