Отправка с использованием KafkaTemplate<String, String> возвращает исключение для использования String в качестве ключа

Question

При использовании Integer в качестве ключа это не проблема, kafka должен иметь возможность обрабатывать строки как ключ.

ProducerFactory<String, String> pf =
                new DefaultKafkaProducerFactory<String, String>(senderProps);
KafkaTemplate<String, String> template = new KafkaTemplate<>(pf);
ProducerRecord<String,String> pr = new ProducerRecord<>("my-topic", "key1","test");
        template.send(pr);`

Выдает ниже исключения:

Org.apache.kafka.common.errors.SerializationException: невозможно преобразовать ключ класса java.lang.String в класс org.apache.kafka.common.serialization.IntegerSerializer, указанный в key.serializer.

Вызывается: java.lang.ClassCastException: java.lang.String не может быть приведен к java.lang.Integer на org.apache.kafka.common.serialization.IntegerSerializer.serialize(IntegerSerializer.java:21) на org.apache.kafka.common.serialization.ExtendedSerializer$Wrapper.serialize(ExtendedSerializer.java:65) в org.apache.kafka.common.serialization.ExtendedSerializer$Wrapper.serialize(ExtendedSerializer.java:55) в org.apache.kafka.clients.producer.KafkaProducer.doSend(KafkaProducer.java:799) в org.apache.kafka.clients.producer.KafkaProducer.send(KafkaProducer.java:784) в org.springframework.kafka.core.DefaultKafka:285) в org.springframework.kafka.core.KafkaTemplate.doSend(KafkaTemplate.java:357) в org.springframework.kafka.core.KafkaTemplate.send(KafkaTemplate.java:206)

Answer 1

Кажется, ваш сериализатор ключей установлен как Integer в ProducerConfig. Вам нужно установить KEY_SERIALIZER_CLASS_CONFIG как строка:

@Bean
    public Map<String, Object> producerConfigs() {
        Map<String, Object> props = new HashMap<>();
        props.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, bootstrapServers);
        props.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class);
        props.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class);
        return props;
    }

Answer 2

Похоже, вы настроили как keySerializer: IntegerSerializer, но вы отправили сообщения с ключом типа String. Вы должны изменить тип сериализатора или тип ключа, чтобы соответствовать друг другу