我得到这个Kafka存储异常:停止由于不可恢复的io错误在处理生产请求异常周期性每3-4天从一段时间。它会导致我的代理关闭,从而导致未提交的偏移量导致数据丢失。有人能提出同样的理由吗。
ndasle7k1#
原因之一可能是您正在使用windows计算机运行kafka代理。kafka日志可能存储在windows驱动器(c:)中。尝试将kafka日志目录从c:drive更改为d:\drive,但从未遇到过此问题。确保磁盘有足够的空间。尝试删除kafka logs dir(请不要在生产中尝试这个),并执行zookeeper logs clean。
1条答案
按热度按时间ndasle7k1#
原因之一可能是您正在使用windows计算机运行kafka代理。kafka日志可能存储在windows驱动器(c:)中。尝试将kafka日志目录从c:drive更改为d:\drive,但从未遇到过此问题。
确保磁盘有足够的空间。尝试删除kafka logs dir(请不要在生产中尝试这个),并执行zookeeper logs clean。