我想用几个i/o密集型作业测试我的hadoop i/o性能。我知道基准测试dfsio就是一个很好的例子。但我仍然想知道是否还有其他适合hadoop的i/o密集型基准测试？顺便问一下，有没有cpu密集型的基准测试？谢谢。
vlurs2pr1#
hadoop在examples包中捆绑了terasort基准测试。它主要是io密集型的，可以很好地满足您的需要。
j2cgzkjk2#
wordcount是cpu密集型的，正如另一个答案所述，terasort是i/o密集型的。你应该去看看hibench，它是英特尔的hadoop基准测试套件。hibench使用了许多现有的hadoop基准测试，并包含了wordcount（或terasort）等基准测试的准备脚本，因为这些基准测试要求首先生成输入数据。
2条答案
按热度按时间vlurs2pr1#
hadoop在examples包中捆绑了terasort基准测试。它主要是io密集型的，可以很好地满足您的需要。
j2cgzkjk2#
wordcount是cpu密集型的，正如另一个答案所述，terasort是i/o密集型的。
你应该去看看hibench，它是英特尔的hadoop基准测试套件。
hibench使用了许多现有的hadoop基准测试，并包含了wordcount（或terasort）等基准测试的准备脚本，因为这些基准测试要求首先生成输入数据。