我想在hadoop集群上执行基准测试和性能测试。我知道hadoopmapreducetest.jar和hadoopmapreduce示例*.jar有很多用于基准测试的程序。是否有任何文件可供这些测试,其中给出了详细的测试和性能措施为每一个?此外,在执行任何测试后,是否有任何值可用于比较结果?谢谢。
kmpatx3s1#
你有hibench,它包含了一些用于基准测试hdfs的工具,hive。。。你可以在这里找到它:https://github.com/intel-hadoop/hibench伯克利大学用Hive、 Impala 的数据集创建了一个基准。。。您可以在这里查阅:https://amplab.cs.berkeley.edu/benchmark/terasort也是一个著名的基准。它包含3个程序,生成数据并使用mapreduce测试集群。更多信息请参见:http://hadoop.apache.org/docs/current/api/org/apache/hadoop/examples/terasort/package-summary.html
1条答案
按热度按时间kmpatx3s1#
你有hibench,它包含了一些用于基准测试hdfs的工具,hive。。。你可以在这里找到它:https://github.com/intel-hadoop/hibench
伯克利大学用Hive、 Impala 的数据集创建了一个基准。。。您可以在这里查阅:https://amplab.cs.berkeley.edu/benchmark/
terasort也是一个著名的基准。它包含3个程序,生成数据并使用mapreduce测试集群。更多信息请参见:http://hadoop.apache.org/docs/current/api/org/apache/hadoop/examples/terasort/package-summary.html