我们有Kafka,我们正在使用aws cloud watch提供的grafana dashboad进行监控。从过去几天开始,我们看到了一些异常。我对 SumOffsetLag 指标参数不太了解。这个峰值如何降低性能,以及我们如何改进它
e4eetjau1#
监控消费者滞后可以让你识别出那些跟不上主题中可用的最新数据的缓慢或停滞的消费者。必要时,你可以采取补救措施,如缩放或重启这些消费者。要监控消费者滞后,你可以使用Amazon CloudWatch或使用Prometheus打开监控。消费者滞后指标量化了写入主题的最新数据与应用程序读取的数据之间的差异。Amazon MSK提供了以下消费者滞后指标,您可以通过Amazon CloudWatch或Prometheus的开放式监控获得这些指标:估计最大时间延迟、估计时间延迟、最大偏移延迟、偏移延迟和求和偏移延迟。Amazon MSK支持使用Apache Kafka 2.2.1或最新版本的群集的使用者。
1条答案
按热度按时间e4eetjau1#
消费者滞后监控
监控消费者滞后可以让你识别出那些跟不上主题中可用的最新数据的缓慢或停滞的消费者。必要时,你可以采取补救措施,如缩放或重启这些消费者。要监控消费者滞后,你可以使用Amazon CloudWatch或使用Prometheus打开监控。
消费者滞后指标量化了写入主题的最新数据与应用程序读取的数据之间的差异。Amazon MSK提供了以下消费者滞后指标,您可以通过Amazon CloudWatch或Prometheus的开放式监控获得这些指标:估计最大时间延迟、估计时间延迟、最大偏移延迟、偏移延迟和求和偏移延迟。Amazon MSK支持使用Apache Kafka 2.2.1或最新版本的群集的使用者。