kafka给出:“在实际进入消费组之前,组成员需要有一个有效的成员id”

nue99wik  于 2021-06-04  发布在  Kafka
关注(0)|答案(1)|浏览(2300)

我使用kafak来使用java中的消息。我想通过在本地盒子上多次启动同一个应用程序来进行测试。当我开始的时候,我第一次能够开始使用来自主题的消息。当我启动第二个时,我得到:“join group failed with org.apache.kafka.common.errors.memberidrequiredexception:组成员需要有一个有效的成员id才能真正进入消费组”,并且没有从主题中获得任何消息。如果我尝试开始更多的问题,我会得到同样的问题。
我为Kafka使用的配置是

spring:
  kafka:
    bootstrap-servers: kafka:9092
    consumer:
      auto-offset-reset: earliest
      key-deserializer: org.springframework.kafka.support.serializer.ErrorHandlingDeserializer2
      value-deserializer: org.springframework.kafka.support.serializer.ErrorHandlingDeserializer2
      properties:
        spring.deserializer.key.delegate.class: org.springframework.kafka.support.serializer.JsonDeserializer
        spring.deserializer.value.delegate.class: org.springframework.kafka.support.serializer.JsonDeserializer
        spring.json.use.type.headers: false
    listener:
      missing-topics-fatal: false

我有两个主题

@Configuration
public class KafkaTopics {
    @Bean("alertsTopic")
    public NewTopic alertsTopic() {

        return TopicBuilder.name("XXX.alerts")
            .compact()
            .build();
    }

    @Bean("serversTopic")
    public NewTopic serversTopic() {

        return TopicBuilder.name("XXX.servers")
            .compact()
            .build();
    }

}

在不同的类文件中有两个侦听器。

@KafkaListener(topics = SERVERS_KAFKA_TOPIC, id = "#{T(java.util.UUID).randomUUID().toString()}",
    properties = {
        "spring.json.key.default.type=java.lang.String",
        "spring.json.value.default.type=com.devhaus.learningjungle.db.kafka.ServerInfo"
    })
public void registerServer(
    @Payload(required = false) ServerInfo serverInfo
) 

@KafkaListener(topics = ALERTS_KAFKA_TOPIC,
    id = "#{T(java.util.UUID).randomUUID().toString()}",
    properties = {
        "spring.json.key.default.type=com.devhaus.learningjungle.db.kafka.AlertOnKafkaKey",
        "spring.json.value.default.type=com.devhaus.learningjungle.db.kafka.AlertOnKafka"
    })
public void processAlert(
    @Header(KafkaHeaders.RECEIVED_MESSAGE_KEY) AlertOnKafkaKey key,
    @Header(KafkaHeaders.RECEIVED_PARTITION_ID) int partitionId,
    @Header(KafkaHeaders.OFFSET) long offset,
    @Payload(required = false) AlertOnKafka alert)
nhjlsmyf

nhjlsmyf1#

根据我的分析。这是正常行为,您可以更改日志级别以排除它。
原因是如果服务器检测到客户端可以支持 member.id 它会将错误返回给客户端。这在kip-394中有记载。
然后,客户端将使用生成的成员id重新连接回服务器。

相关问题