mapr中有大量小文件

wz8daaqr 于 2021-06-04 发布在 Hadoop

关注(0)|答案(1)|浏览(339)

嗨mapr支持大量（400万）小文件（每个20kb）它能管理这些文件的元数据吗？如果我想运行一个mapreduce来解析这些文件中的每一个，那么对于一个5节点（每个节点：32gbram，8核）集群，我能期望什么样的性能呢。提高绩效有什么建议？

hadoop performance Metadata File mapr

来源：https://stackoverflow.com/questions/16721928/large-number-of-small-files-in-mapr

1条答案

按热度按时间

这个问题也在answers.mapr.com上被问到，并且在那里得到了回答。请看http://answers.mapr.com/questions/6755/large-no-of-small-files.html

赞(0）回复(0）举报 2021-06-04

相关问题

热门标签

Java query python Node 开发语言 request Util 数据库 Table 后端算法 Logger Message Element Parser

最新问答

xxl-job 安全组扫描到执行器端口服务存在信息泄露漏洞
回答(1) 发布于 4个月前
xxl-job 不能和nacos兼容？
回答(3) 发布于 4个月前
xxl-job 任务执行完后无法结束，日志一直转圈
回答(3) 发布于 4个月前
xxl-job-admin页面上查看调度日志样式问题
回答(1) 发布于 4个月前
xxl-job 参数512字符限制能否去掉
回答(1) 发布于 4个月前