spring boot 消费kafka

原创

mob649e8157ebce 2024-01-15 10:20:26 ©著作权

文章标签 spring kafka 应用程序 文章分类 spring boot 后端开发

©著作权归作者所有：来自51CTO博客作者mob649e8157ebce的原创作品，请联系作者获取转载授权，否则将追究法律责任

Spring Boot 消费 Kafka

介绍

Kafka是一个高性能的分布式消息队列系统，被广泛应用于大数据领域。Spring Boot提供了与Kafka集成的简化方式，使得使用Kafka变得更加简单。本文将介绍如何在Spring Boot中消费Kafka消息，并提供相应的代码示例。

准备工作

在开始之前，我们需要确保以下几个条件已经满足：

安装Kafka并启动Kafka服务。
创建一个Kafka主题（Topic）并向其中发送一些消息。
创建一个Spring Boot项目。

添加依赖

在pom.xml文件中添加如下依赖：

<dependencies>
    <dependency>
        <groupId>org.springframework.kafka</groupId>
        <artifactId>spring-kafka</artifactId>
    </dependency>
</dependencies>

配置Kafka消费者

在application.properties文件中添加Kafka相关的配置：

spring.kafka.bootstrap-servers=localhost:9092
spring.kafka.consumer.group-id=my-consumer-group

创建Kafka消息消费者

创建一个Kafka消息消费者类，用于监听并处理Kafka消息。可以使用@KafkaListener注解来标识一个方法作为Kafka消息的消费者。

import org.springframework.kafka.annotation.KafkaListener;
import org.springframework.stereotype.Component;

@Component
public class KafkaConsumer {

    @KafkaListener(topics = "my-topic", groupId = "my-consumer-group")
    public void consume(String message) {
        System.out.println("Received message: " + message);
        // 处理消息
    }
}

在上述示例中，@KafkaListener标识的consume方法将会监听名为my-topic的Kafka主题，并作为my-consumer-group消费者组的一部分来消费消息。每当有新的消息到达时，consume方法将会被调用，并传递消息内容作为参数。

运行消费者

在Spring Boot应用程序的入口类中添加@EnableKafka注解，以启用Kafka消费者功能。

import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
import org.springframework.kafka.annotation.EnableKafka;

@SpringBootApplication
@EnableKafka
public class Application {
    public static void main(String[] args) {
        SpringApplication.run(Application.class, args);
    }
}

现在，可以运行Spring Boot应用程序，并观察控制台输出。当有新的消息到达时，消费者将会打印出相应的消息内容。

关系图

下面是一个展示了Kafka消费者与Kafka服务之间关系的关系图：

erDiagram
    KAFKA_PRODUCER ||--o KAFKA_TOPIC : sends messages to
    KAFKA_CONSUMER ||--o KAFKA_TOPIC : consumes messages from

序列图

下面是一个展示了Kafka消费者与Kafka服务之间交互过程的序列图：

sequenceDiagram
    participant KafkaConsumer
    participant KafkaServer

    KafkaConsumer->>KafkaServer: Subscribe to topic
    KafkaServer->>KafkaConsumer: Acknowledge subscription
    KafkaServer->>KafkaConsumer: Send message
    KafkaConsumer->>KafkaConsumer: Process message

总结

通过本文，我们学习了如何在Spring Boot应用程序中消费Kafka消息。首先，我们添加了与Kafka集成的依赖。然后，我们配置了Kafka消费者，并创建了一个用于处理消息的消费者类。最后，我们运行了消费者，并展示了Kafka消费者与Kafka服务之间的关系和交互过程。希望本文能够帮助你更好地理解和使用Spring Boot消费Kafka消息。