Kafka全解析
一. ConceptsKafka is used for building real-time data pipelines and streaming apps分布式消息传递网站活跃数据跟踪日志聚合流式数据处理数据存储事件源……Kafka terminology 术语1.TopicsKafka maintains feeds of messages in categ
转载
2018-06-24 20:24:15
1247阅读
Kafka的Rebalance机制负责在消费者组中重新分配分区所有权，确保高可用性和负载均衡。传统Eager Rebalance会导致服务暂停，而增量协作式Rebalance(KIP-429)通过分步迁移减少了中断时间。最新的服务端Rebalance协议(KIP-848)将分配逻辑移至服务端，简化了流程并提高了效率。对于Kafka Streams等有状态应用，还引入备用副本和预热副本来加速恢复。Rebalance机制经历了从 全部暂停 到 渐进优化 再到 服务端集中管理"的演进，不断提升系统的可用性和性能。
建议选择最新的稳定版本（如，其中2.13是 Scala 版本，3.6.1是 Kafka 版本）
1、kafka命令sh kafka-server-start.sh -daemon ../config/server.propertiessh kafka-server-stop.shsh kafka-topics.sh --zookeeper localhost:2181 --list#副本数不能大于broker数sh kafka-topics.sh --zookeeper localhost:2181 --create --topic demo --partitions 1...
原创
2021-06-04 18:55:10
561阅读
2020 年，Pulsar 受到持续关注，Pulsar 的应用场景也越来越广泛。本文分别从性能、架构和功能方面比较 Pulsar ...
转载
2021-06-12 00:31:12
265阅读
2020 年，Pulsar 受到持续关注，Pulsar 的应用场景也越来越广泛。本文分别从性能、架构和功能方面比较 Pulsar ...
转载
2021-06-12 00:31:30
1138阅读
Kafka Windows 安装启动与 YAML 配置全解析一、Kafka Windows 版安装与启动1. 下载地址Kafka 官方提供了适用于 Windows 的二进制包，下载地址：Apache Kafka 官方下载 建议选择最新的稳定版本（如 kafka_2.13-3.6.1.tgz，其中 2 ...
High Level Consumer 很多时候，客户程序只是希望从Kafka读取数据，不太关心消息offset的处理。同时也希望提供一些语义，例如同一条消息只被某一个Consumer消费（单播）或被所有Consumer消费（广播）。因此，Kafka High Level Consumer提供了一个
转载
2017-02-26 08:57:00
101阅读
slice全解析 昨天组内小伙伴做分享，给出了这么一段代码： package main import ( "fmt" ) func fun1(x int) { x = x + 1 } func fun2(x int) { x = x + 1 } func fun3(x []int) { x = ap
原创
2022-01-18 11:36:26
181阅读
什么是UTM
UTM（United Threat Management）意为统一威胁管理，是在2004年9月由IDC提出的信息安全概念。IDC将防病毒、防火墙和入侵检测等概念融合到被称为统一威胁管理的新类别中，该概念引起了业界的广泛重视，并推动了以整合式安全设备为代表的市场细分的诞生。由IDC提出的UTM是指由硬件、软件和网络技术组成的具有专门用途的设备，它主要提供一项或多项安全功能，将多种安全
原创
2005-11-30 14:53:12
1815阅读
1评论
Serialization即序列化，序列化是可被定义为将对象的状态存储到存储媒介中的过程。在此过程中，对象的公共字段和私有字段以及类的名称（包括包含该类的程序集）都被转换为字节流，然后写入数据流。在以后反序列化该对象时，创建原始对象的精确复本。Remoting和Web Service就是序列化的典型的应用，通过序列化将一个对象从一个应用程序域，发送到另一个应用程序域。序列化类默认的情况下是要求他的所有的成员都是要可序列化的（除事件、委托、显式定义不可序列化），对于不想被序列化的成员要声明不可序列化把它加上 [NonSerialized]属性告诉.NET这个类不要被序列化，这样在序列化的时候就不
转载
2012-09-28 16:03:00
154阅读
2评论
什么是 makefile或许很多 Winodws 的程序员都不知道这个东西，因为那些 Windows的 IDE 都为你做了这 个工作，但我觉得要作一个好的和 professional 的程序员，makefile 还是要懂。这就好像现在有这么多的 HTML 的编辑器，但如果你想成为一个专业人士，你还是要了解 HTML 的标识的含义。特别在 Unix 下的软件编译，你就不能不自己写 makefile
转载
2009-11-16 22:44:00
132阅读
2评论
GraphQL全解析GraphQL 是一个由 Facebook 开源的数据查询和操作语言，它可以大幅提高应用程序的性能和灵活性，并且非常适合构建 API。这篇文章将介绍 GraphQL 的基础知识、使用方法以及与 RESTful API 相比的优势。什么是GraphQL？GraphQL 允许您定义数据模型并根据此模型进行查询或修改数据。相对于传统的 RESTful API，GraphQL 更加灵活
原创
2023-07-01 16:15:30
125阅读
端口全解析。。。。。
端口可分为3大类：
1） 公认端口（Well Known Ports）：从0到1023，它们紧密绑定于一些服务。通常这些端口的通讯明确表明了某种服 务的协议。例如：80端口实际上总是HTTP通讯。
2） 注册端口（Registered Ports）：从1024到49151。它们松散地绑定于一些服务。也就是说有许多服务绑定于这些端口，这些端口同样用于许多其它目的。例如：许
转载
精选
2007-04-08 10:43:11
844阅读
Nginx 全解析
目 录
一、 Nginx 基础知识
二、 Nginx 安装及调试
三、 Nginx Rewrite
四、 Nginx Redirect
五、 Nginx 目录自动加斜线:
六、 Nginx Location
七、 Nginx expires
八、 Nginx 防盗链
九、 Nginx 访问控制
十、 Nginx日志处理
十一、 Nginx Cache
转载
精选
2012-05-01 23:06:47
683阅读
前言 今天继续屏幕刷新机制的知识讲解，上文说到vsync的处理，每一帧UI的绘制前期处理都在Choreographer中实现，那么今天就来看看这个神奇的舞蹈编舞师是怎么将UI变化反应到屏幕上的。 代码未动，图先行 UI变化 上期说到app并不是每一个vsync信号都能接收到的，只有当应用有绘制需求的 ...
转载
2021-01-06 09:55:00
237阅读
2评论
