hadoop基准测试/性能测试

z9gpfhce  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(375)

我想在hadoop集群上执行基准测试和性能测试。我知道hadoopmapreducetest.jar和hadoopmapreduce示例*.jar有很多用于基准测试的程序。
是否有任何文件可供这些测试,其中给出了详细的测试和性能措施为每一个?此外,在执行任何测试后,是否有任何值可用于比较结果?
谢谢。

kmpatx3s

kmpatx3s1#

你有hibench,它包含了一些用于基准测试hdfs的工具,hive。。。你可以在这里找到它:https://github.com/intel-hadoop/hibench
伯克利大学用Hive、 Impala 的数据集创建了一个基准。。。您可以在这里查阅:https://amplab.cs.berkeley.edu/benchmark/
terasort也是一个著名的基准。它包含3个程序,生成数据并使用mapreduce测试集群。更多信息请参见:http://hadoop.apache.org/docs/current/api/org/apache/hadoop/examples/terasort/package-summary.html

相关问题