Kafka连接源连接器的任务频繁上下(运行或丢失)

cfh9epnr  于 2021-06-05  发布在  Kafka
关注(0)|答案(0)|浏览(319)

有时使用kafka connect,我会看到jdbcsourceconnector的任务上下浮动——也就是说,rest接口有时报告一个正在运行的任务,有时报告没有任务(连接器一直在运行)。在这些时间里,任务运行时似乎正在工作。然后,如果我删除并重新创建连接器,问题似乎就消失了。我怀疑出了什么问题——任务不应该像这样搅动,对吧?但是服务器上的info/warn日志似乎没有给我多少线索,尽管有很多信息行需要排序。
jdbcsourceconnector任务在不存在和正在运行之间振荡是正常的吗?
如果没有,我应该在日志中查找什么来帮助解决问题(我看到很多信息行)
你知道这是什么原因吗?
我对我的rest连接器的状态进行了监视,这一个给了我以下信息(其中的值是运行状态的数量;2是连接器正在运行且任务正在运行,但1是连接器正在运行且没有任务)。今天9:01我删除并创建了连接器,从而“解决”了问题。有什么想法吗?

我有Kafka连接版本“5.5.0-ccs”与汇合平台5.4一起使用,运行在带有2个pod的openshift上。我有6个独立的连接器,每个连接器最多有1个任务,我通常看到3个连接器在一个pod上有任务,另外3个在另一个pod上有任务。在上面的例子中,这是6个任务中唯一一个表现出这种行为的,但是我已经看到了其中的2到3个在做。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题