蚂蚁金服一面:下午杭州的电话,问有没有空,果断有空,虽然感觉略显紧张,有点懵逼。面试的题目:HashMap和Hashtable的区别实现一个保证迭代顺序的HashMap说一说排序算法,稳定性,复杂度说一说GC可以保证的实习时长职业规划整体来说,一面的基础性问题比较多,所以博主基本都答出来了,准备过还是有些用处的。所以一面完了感觉还不错,接着第二天下午就二面了。蚂蚁金服二面二面是我最慌的面试,因为二
转载 2024-08-29 20:52:23
43阅读
说明:当前kafka的版本为2.8.11,Spring Boot的版本为2.7.6。第一步:在pom.xml中引入下述依赖<dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> <versio
转载 2024-02-20 17:21:43
447阅读
目录partitions,replication(设置)建议:生产者机制:设置缓冲区大小数据打包的大小Batch的最大存活时间最大请求设置重试机制Broker(集群中一个服务器,称为一个 broker)数据在kafka里的存储机制:消费:亲自测试,springboot 不会自动的帮你提交 offset 偏移量。我的项目中的springboot + kakfa配置内容 kafka在代码中的
转载 2024-07-26 09:08:16
129阅读
最近公司项目,需要支持Kafka SASL,经过2天的摸索,终于搞定,特此记录。 该文从以下5方面,进行介绍环境搭建代码修改监控工具修改命令脚本参数对比常见报错一、环境搭建1、Kafka Server修改在config目录下创建kafka_server_jaas.conf文件,配置如下KafkaServer { org.apache.kafka.common.security.plain.Pla
转载 2024-05-22 09:40:30
640阅读
pom.xml<dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> <version>2.3.6.RELEASE</version> </
转载 2024-03-19 23:11:55
209阅读
SpringBoot 多组 Kafka 配置单组 Kafka 配置时隔多日,冒个泡吧。场景 是 我在日常的开发过程中需要监听 kafka 的消息进行回调处理,但是呢,不同的三方服务他们用了不同的 kafka 集群,那么默认的 Spring 自动读取的 kafka 配置就不行了,它默认只支持一组,那么就需要单独进行多组配置。先说单组配置的场景,只需要在你的 yml 里增加配置spring: ka
转载 2024-06-12 14:16:03
308阅读
kafka基本概念producer: 生产者,负责发布消息到kafka cluster(kafka集群)中。生产者可以是web前端产生的page view,或者是服务器日志,系统CPU、memory等。consumer: 消费者,每个consumer属于一个特定的consuer group(可为每个consumer指定group name,若不指定group name则属于默认的group)。创建
转载 2024-03-11 06:41:06
97阅读
在项目中使用kafka的场景有很多,尤其是实时产生的数据流,例如:电商数据、电信数据、统计等,通过kafka可以结合flink进行大数据分析。所以第一步就是要集成kafkaspringboot已经将kafka集成到框架里了,只需要引用依赖就可以简单使用。一、引入依赖<!-- spring-kafka --> <dependency> <groupId>
转载 2023-08-19 14:01:40
157阅读
1.pom<!-- kafka--> <dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> </dependency>2.yml默认连接一个kafka配置如下: s
转载 2023-09-24 20:39:01
144阅读
作者:陈凯玲 my.oschina.net/keking/blog/3056698前言kafka是一个消息队列产品,基于Topic partitions的设计,能达到非常高的消息发送处理性能。Spring创建了一个项目Spring-kafka,封装了Apache 的Kafka-client,用于在Spring项目里快速集成kafka。除了简单的收发消息外,Spring-kafka还提供了很多高级功
转载 2024-03-06 09:31:14
388阅读
依赖:<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency>
转载 2024-03-20 18:06:14
72阅读
这篇文章展示了如何配置Spring Kafka和Spring Boot以使用JSON发送消息并以多种格式接收它们:JSON,纯字符串或字节数组。基于此配置,您还可以将Kafka生成器从发送JSON切换到其他序列化方法。此示例应用程序还演示了同一消费组中三个Kafka消费者的使用情况,因此消息在三者之间进行负载平衡。每个消费者实现不同的反序列化方法。您可以了解一些Kafka概念,如Consumer
大家好,我是二师兄,本篇文章为大家讲解SpringBoot相关配置功能,包括application.properties配置文件、外部配置、属性注入等。配置文件基本配置支持创建SpringBoot项目,会在src/main/resources目录下生成application.properties文件,这就是SpringBoot默认指定的配置文件。基本使用方式如下:server.port=8080
转载 2024-02-21 19:39:32
156阅读
SpringBoot整合Kafka安装 windows版安装包下载地址:https://kafka.apache.org/downloads 下载完毕后得到tgz压缩文件,使用解压缩软件解压缩即可使用,解压后得到如下文件 建议使用windows版2.8.1版本。启动服务器 kafka服务器的功能相当于RocketMQ中的broker,kafka运行还需要一个类似于命名服务器的服务。在kaf
转载 7月前
68阅读
SpringBoot版本 2.4,kafka版本2.13一、引入相关的包<!-- kafka --> <dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</
转载 2024-02-04 07:36:15
508阅读
本文主要简述实践部分,不涉及kafka原理等。 kafka安装http://kafka.apache.org/downloads在官网下载这个版本的kafka(其它版本没试过,可能会有与springboot版本出现冲突的问题)上传到linux服务器,然后解压到一个目录下,进入kafka的config目录修改配置文件server.properties,将其中的一个已经被注释的配置&nbsp
转载 2024-03-27 11:55:33
770阅读
1.pom依赖:        springbootkafka版本对应关系:https://spring.io/projects/spring-kafka#overview<dependency> <groupId>org.springframework.kafka</group
转载 2023-08-26 15:58:03
139阅读
kafka简介ApacheKafka®是一个分布式流媒体平台。有三个关键功能:发布和订阅记录流,类似于消息队列或企业消息传递系统。 以容错的持久方式存储记录流。 记录发生时处理流。Kafka通常用于两大类应用:构建可在系统或应用程序之间可靠获取数据的实时流数据管道 构建转换或响应数据流的实时流应用程序kafka概念(1)什么是流处理?所谓流处理,我的理解是流水线处理。例如,电子厂每个人负责一个功能
转载 2024-05-31 07:57:24
97阅读
文章目录首先需要命令行创建一个名为cities的主题,并且创建该主题的订阅者。1、使用Kafka原生API1.1、创建spring工程1.2、创建发布者1.3、对生产者的优化1.4、批量发送消息1.5、创建消费者组1.6 消费者同步手动提交1.7、消费者异步手动提交1.8、消费者同异步手动提交2、SpringBoot Kafka2.1、定义发布者1、修改配置文件2、定义发布者处理器2.2、定义消
文章目录前提条件项目环境创建Topic配置信息生产消息生产自定义分区策略生产到指定分区消费消息offset设置方式代码仓库 *本文基于SpringBoot整合Kafka,通过简单配置实现生产及消费,包括生产消费的配置说明、消费者偏移设置方式等。更多功能细节可参考 spring kafka 文档:https://docs.spring.io/spring-kafka/docs/current/r
转载 2023-11-03 09:44:33
191阅读
  • 1
  • 2
  • 3
  • 4
  • 5