SocketServer作为kafka集群中broker的通信模块，主要用来接收socket请求，然后产生为之服务的SocketChannel对象，再通过这个SocketChannel对象来和客户端通信。SocketServer的代码如下：class SocketServer(val brokerId: Int,
val host: String,
转载
2024-03-26 05:59:34
86阅读
目录一、定义二、消息队列三、Kafka 基础架构 一、定义Kafka 传统定义：Kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用于大数据实时处理领域。发布/订阅：消息的发布者不会将消息直接发送给特定的订阅者，而是将发布的消息分为不同的类别，订阅者只接收感兴趣的消息。Kafka 最新定义：Kafka 是一个开源的分布式事件流平台 (Event Stream
转载
2024-03-29 22:14:40
134阅读
Kafka 面经 基础篇 （一）最近会持续更新，全文已整理在Github仓库 eat-kafka，喜欢可以收藏点赞，有问题欢迎指出什么是消息引擎，消息引擎的作用？- 传递消息
点对点模型
发布订阅模型
- 解耦削峰Kafka 术语解释- 三层消息架构
主题、分区、消息
- Broker
Kafka服务器端指Broker服务进程, 一个Kafka集群由多个Broker组成
B
转载
2024-08-07 07:50:20
26阅读
伴随着前端ajax的应用场景越来越多，那就免不了一个整合的ajax优化解决方案了，自己优化太麻烦？没事，有它帮你解决：hajax与当下比较热门的请求库 axios 和原生的 fetch相比，hajax有什么一些什么内容和特点呢？基本操作：基本请求，类promise链式操作方式，请求和响应的拦截器，简便的请求取消等；轻松优化：接口数据缓存，防抖，节流；体积小：9kb；针对端：浏览器（暂
js操作文件类文件对象 File 与 Blob读取文件示例：读取图片 获取base64 data url截取文件使用Generator 函数进行文件切片切片批量上传参考资料 类文件对象 File 与 Blob对文件的处理离不开File对象。File提供了文件的相关信息，它继承于Blob对象，并添加了name(文件名)、lastModified(最后一次修改的时间戳)等属性。 我们可以看一下从 &
转载
2024-09-06 08:23:32
109阅读
前端上传文件上传方式input[type="file"]上传文件几种需求修改文件名称得到文件后，对名字统一修改
File对象为只读对象，不能直接修改；设置对象writableObject.defineProperty(file, 'name', {writable: true})
file.name = newFileName;var newFile = new File([file], new
java中poi导出Excel表格，前端以流的方式接收，而非直接生成文件再下载，解决多台服务器部署后，路径地址不统一导致的下载问题。生成Excel示例图：2、代码说明① 在上次的基础上增加了底部数据的写入，有时候我们可能需要在表格中实现上图所示的表格合并，但是每一行的合并格数都会有不同的情况。所以在以前的基础上做以修改，加上了自定义一行中动态显示几列的功能。② 功能实现原理：利用list中包含Ha
转载
2024-09-20 13:52:04
81阅读
spark streaming是以batch的方式来消费，strom是准实时一条一条的消费。当然也可以使用trident和tick的方式来实现batch消费(官方叫做mini batch)。效率嘛，有待验证。不过这两种方式都是先把数据从kafka中读取出来，然后缓存在内存或者第三方，再定时处理。如果这时候集群退出，而偏移量又没处理好的话，数据就丢掉了。而spark streaming提供了两种获取
转载
2024-04-01 13:17:51
95阅读
springmvc后台接前端的参数，数组，集合，复杂对象等参考地址：
常用的几种方式如下：
前端使用jquery向后台传递数组类型的参数，Java后台直接通过List类型接收，会发现无法取到参数。
如果后台非要用List接收参数的话，可以这样实现：
POST方法时Java后端使用@RequestBody注解
转载
2024-07-26 08:41:32
45阅读
# 项目方案：Java如何接收前端数据
## 一、项目概述
本项目是一个基于Java的Web应用，主要实现前端向后端传输数据的功能。前端使用HTML、CSS、JavaScript，后端使用Java语言。前端通过AJAX技术将数据传输给后端，并后端接收并处理这些数据。本文将详细介绍如何实现前端向后端传输数据的具体方案。
## 二、前端传输数据方案
前端通过AJAX技术向后端发送数据，后端通过HT
原创
2024-04-16 05:03:03
89阅读
# 项目方案：Python如何接收前端json
## 1. 引言
在现代web开发中，前后端的数据交互是非常常见的，其中一种常见的数据格式是json（JavaScript Object Notation）。json是一种轻量级的数据交换格式，易于阅读和编写，并且在多种编程语言中都有良好的支持。本项目方案将介绍如何在Python中接收前端传递的json数据，并提供了相关的代码示例。
## 2.
原创
2023-09-23 12:38:10
142阅读
在现代Web开发中，前端与后端之间的数据交换是极为重要的一环。前端通过`FormData`对象来发送表单数据，而后端需要能够正确接收这些数据以进行处理。在这篇文章中，我们将深入探讨如何在Java中接收前端发送的`FormData`，并通过示例来展示具体的实现步骤。
### 一、理解 FormData
首先，我们需要了解`FormData`的工作原理。`FormData`接口用于构建一组键值对，
返回json给前端导包：controller方法直接返回对象或对象列表，要加@ResponseBody，表示以响应体的形式发送：controller获取请求体数据在参数前标识@RequestBody，表示把请求体以字符串的形式封装到参数中：post类型的表单：运行结果：注意：如果表单中有上传文件，那么文件名也会包含在这个字符串中；如果前端在请求体发送了json，controller方法参数用@Re
转载
2024-03-20 14:48:25
518阅读
# Java如何接收前端数组的项目方案
在现代Web开发中，前端与后端的交互频繁，尤其是数据传输方面。前端经常需要将数组数据发送到后端，而后端开发者需要正确地接收和处理这些数据。本文将介绍一种有效的方式，通过Java Spring框架接收前端传来的数组，并提供相关的代码示例。
## 1. 项目背景
在一个在线购物系统中，用户可以选择多个商品，并将这些商品信息作为数组发送到后端进行处理。后端需
原创
2024-09-25 06:07:35
12阅读
在之前的基础上，基本搞清楚了Kafka的机制及如何运用。这里思考一下：Kafka中的消息会不会丢失或重复消费呢？为什么呢？ 要确定Kafka的消息是否丢失或重复，从两个方面分析入手：消息发送和消息消费1、消息发送 Kafka消息发送有两种方式：同步（sync）和异步（
转载
2024-03-18 08:21:16
47阅读
1.基于Receiver（接收器）的方式:使用Receiver来接收Kafka中的数据。Receiver是一个基于Kafka高级消费者API实现的，对于所有接收器来说,这些接收器都是通过Receiver来接收Kafka中的数据并保存数据到 Spark的executor中,之后通过SparkStreaming启动Job来处理这些数据。 然而在默认的配置下,这种方式在某些异常情况下回出现数据丢失情况,
转载
2024-02-04 16:57:49
81阅读
DirectKafkaInputDStream 只在 driver 端接收数据，所以继承了 InputDStream，是没有 receivers 的在结合 Spark Streaming 及 Kafka 的实时应用中，我们通常使用以下两个 API 来获取最初的 DStream（这里不关心这两个 API 的重载）:KafkaUtils#createDirectStream及KafkaUtils#cr
转载
2024-06-05 21:42:35
43阅读
1.4.查看kafka找那个特定主题的详细信息1.5.修改主题的分区数(只能从小往大改)1.6.删除主题二、操作消息命令2.1.生产者向指定主题发送消息2.2.消费者监听指定消息(消费者每次启动都从主题中最开始的消息开始监听)2.3.消费者监听指定主题的消息(消费者每次启动都从最新的消息开始监听)三、消费者组操作命令3.1.创建一下消费者监听消息，并将该消费者放在名为testgroup消费者组下3
转载
2024-06-06 15:11:05
148阅读
请求SpringBoot接受前台参数的六种方式，首先因为从前台发送的请求没有界面的话只能是从地址栏发送并且只能是Get请求，为了测试其他的请求，所以我们使用一个工具->Postman,Postman是一款功能强大的网页调试与发送网页HTTP请求的Chrome插件。对于前台传过来的参数大致分为六种，下面一个一个的做演示学习：演示之前先复习一下，没用SpringBoot获取前台参数的方式，通过r
转载
2023-10-07 01:33:55
1359阅读
kafka的Consumer均衡算法 在说顺序性这个问题之前，我们要先搞明白的是消费者是怎么消费分区上的数据。 我们这里不详细讨论该算法，这不是本文的重点。 简单的说：kafka的消费组的组员最多增加到和partition数量一致，超过的组员只会占用资源，而不起作用； kafka的partition的个数一定要大于消费组组员的个数，并且partition的个数对于消费组组员取模一定要为0，不然有些
转载
2024-06-17 10:54:51
110阅读
