5天后,hbase写入性能下降

bxfogqkk  于 2021-06-08  发布在  Hbase
关注(0)|答案(0)|浏览(322)

在我们使用phoenix编写数据的集群中,我们面临着这个问题。我们观察到,我们的工作最初运作良好。但几天后(4-5天),我们看到我们的工作时间急剧增加(4分钟到30分钟)。输入数据大小几乎相同。重新启动hbase可以解决接下来4-5天的问题。
我们有70个区域服务器,每个服务器大小为128g。50k(每个区域服务器)*70(区域服务器数量)每个作业的放置量。
从rs日志中,我可以看到响应时间从40k/天增加到280k/天,但这些日志中的响应时间小于1000ms。
2018-04-18 00:00:07831 warn[rw.default.writerpcserver.handler=10,queue=4,port=16020]ipc.rpcserver:(responsetooslow):{“call”:“multi(org.apache.hadoop.hbase.protobuf.generated.clientprotos$multirequest)”,“starttimes”:1524009607697,“responsesize”:106,“method”:“multi”,“processingtimes”:134,“client”:“192.168.25.70:54718”,“queuetimems”:0,“class”:“hregionserver”}

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题