溫馨提示×

springboot 整合 kafka 消費者組配置

小樊
181
2024-12-14 22:38:19
欄目: 大數據

在 Spring Boot 中整合 Kafka 消費者組配置,你需要遵循以下步驟:

  1. 添加依賴

在你的 pom.xml 文件中添加 Spring Boot Kafka 依賴:

<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-kafka</artifactId>
</dependency>
  1. 配置 Kafka 消費者屬性

application.propertiesapplication.yml 文件中配置 Kafka 消費者屬性,例如:

spring.kafka.bootstrap-servers=localhost:9092
spring.kafka.consumer.group-id=my-consumer-group
spring.kafka.consumer.auto-offset-reset=earliest
spring.kafka.consumer.key-deserializer=org.apache.kafka.common.serialization.StringDeserializer
spring.kafka.consumer.value-deserializer=org.apache.kafka.common.serialization.StringDeserializer

這里,我們配置了 Kafka 服務器地址、消費者組 ID、自動偏移重置策略以及鍵值的反序列化器。

  1. 創建 Kafka 消費者配置類

創建一個配置類,用于設置 Kafka 消費者相關的 Bean,例如:

import org.apache.kafka.clients.consumer.ConsumerConfig;
import org.apache.kafka.common.serialization.StringDeserializer;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

import java.util.HashMap;
import java.util.Map;

@Configuration
public class KafkaConsumerConfig {

    @Value("${spring.kafka.bootstrap-servers}")
    private String bootstrapServers;

    @Bean
    public Map<String, Object> consumerConfigs() {
        Map<String, Object> props = new HashMap<>();
        props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, bootstrapServers);
        props.put(ConsumerConfig.GROUP_ID_CONFIG, "my-consumer-group");
        props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class);
        props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class);
        props.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "earliest");
        return props;
    }
}
  1. 創建 Kafka 消費者接口和實現類

創建一個 Kafka 消費者接口,用于定義消費者需要處理的消息方法,例如:

public interface KafkaConsumer {
    void consume(String message);
}

然后,創建一個實現該接口的類,例如:

import org.springframework.kafka.annotation.KafkaListener;
import org.springframework.stereotype.Component;

@Component
public class KafkaMessageConsumer implements KafkaConsumer {

    @Override
    @KafkaListener(topics = "${spring.kafka.consumer.topic}", groupId = "${spring.kafka.consumer.group-id}")
    public void consume(String message) {
        System.out.println("Received message: " + message);
    }
}

這里,我們使用了 @KafkaListener 注解來監聽指定主題的消息,并將消費者組 ID 設置為我們在配置文件中定義的值。

  1. 使用 Kafka 消費者

在你的服務類或其他需要使用 Kafka 消費者的地方,注入 KafkaConsumer Bean 并調用其 consume 方法,例如:

import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Service;

@Service
public class MyService {

    @Autowired
    private KafkaConsumer kafkaConsumer;

    public void processMessage() {
        kafkaConsumer.consume("Hello, Kafka!");
    }
}

現在,當你調用 processMessage 方法時,它將使用 Kafka 消費者處理消息。

0
亚洲午夜精品一区二区_中文无码日韩欧免_久久香蕉精品视频_欧美主播一区二区三区美女