二、Kafka组件与角色http://kafka.apache.org/Kafka® is used for building real-time data pipelines and streaming apps. It is horizontally scalable, fault-tolerant, wicked fast, and runs in production in thousan
转载
2024-05-06 19:58:20
75阅读
前言kafka2.8以后得版本可以不依赖zookeeper搭建kafka集群，本文选用kafka3.3.1版本搭建kafka服务端，搭建环境：CentOS 7、JDK17无JDK环境参考搭建：https://blog.51cto.com/u_12141297/6114634一、下载kafka1、下载地址：https://kafka.apache.org/downloads2、创建目
原创
2023-03-11 17:02:32
1184阅读
一.分布式流处理平台Kafka快速认知kafka的核心是一种高吞吐量的分布式流处理平台，它可以处理消费者在网站中的所有动作流数据。 比如 网页浏览，搜索和其他用户的行为等，应用于大数据实时处理领域。 快速认识概念: Broker：Kafka的服务端程序，可以认为一个mq节点就是一个broker. broker存储topic的数据 Producer生产者：创建消息Message,然后发布到MQ中,该
转载
2024-04-13 09:54:22
37阅读
前言：消息系统通常由生产者（ producer ） 、消费者（ consumer ）和消息代理（ broker ） 三大部分组成，生产者会将消息写入消息代理，消费者会从消息代理中读取消息。对于消息代理而育，生产者和消费者都属于客户端：生产者和消费者会发送客户端请求给服务端，服务端的处理分别是存储消息和获取消息，最后服务端返回响应结果给客户端。客户端和服务端的通信涉及网络中不同的节点，客户端和服务端
转载
2024-03-27 10:06:17
206阅读
上一篇呢，有ftpUtil工具类，这篇呢，主要是讲ftp服务在win7上的搭建，目前我用过的方法呢有两种，第一种是直接开启win7上的服务这样不需要下载，操作直观，第二种呢，是下载了一个叫：FileZillaServer的软件，软件不大就2M，用起来也非常简单！下面先说第一中方法：1.在win7上先开启ftp服务：这里点击确定后，可能会要等一会儿，完成后有时系统会提示重启2.打开 计
转载
2023-10-17 10:26:15
115阅读
事先安装好zookeeper 1.下载kafka：http://kafka.apache.org/downloads.html这里我下载的是kafka_2.11-0.11.0.1.tgz 2.解压tar -xzf kafka_2.11-0.11.0.1.tgz解压后的目录结构 3.修改配置config/server.properties主要修改：broker
转载
2024-03-23 11:07:35
47阅读
1、协议设计在目前的Kafka 2.0.0中，一共包含了43种协议类型，每种协议类型都有对应的请求(Request)和响应(Response)，它们都遵守特定的协议模式。1.1、请求头和响应头1.1.1、请求头每种类型的Request都包含相同结构的协议请求头(RequestHeader)和不同结构的协议请求体(RequestBody)，如图6-1所示。协议请求头中包含4个域（Field)：api
转载
2024-06-18 13:06:08
132阅读
pis类，调用handleProdu
原创
2023-04-20 16:30:44
147阅读
这篇文章将介绍如何搭建kafka环境，我们会从单机版开始，然后逐渐往分布式扩展。单机版的搭建官网上就有，比较容易实现，这里我就简单介绍下即可，而分布式的搭建官网却没有描述，我们最终的目的还是用分布式来解决问题，所以这部分会是重点。 Kafka的中文文档并不多，所以我们尽量详细点儿写。要交会你搭建分布式其实很简单，手把手的教程大不了我录个视频就好了，可我觉得那不是走这条路的方式。只有真正了解原理
一、kafka是什么Kafka 是一个高吞吐量的分布式发布订阅消息系统，解耦了消息生产者和消息消费者。与大数据框架 Spark 配合使用，可以实现数据的实时流处理，目前做大数据相关的项目，都会用到 Kafka 消息系统。Kafka 是一个分布式的流处理平台。它具有以下特点：支持消息的发布和订阅，类似于 RabbitMQ、ActiveMQ 等消息队列。支持数据实时处理。能保证消息的可靠性投递。支持消
转载
2024-05-29 23:43:18
83阅读
文章目录Kafka 网络通信组件架构1. 底层服务器 SocketServer1.1 Acceptor 连接接收器1.2 Processor 连接处理器1.3 RequestChannel 请求队列2. 请求处理器线程池 KafkaRequestHandlerPoolKafkaRequestHandler 请求处理器 Kafka 网络通信组件架构本系列文章基于 Kafka 3.0 版本 ，读者如
转载
2024-04-22 21:56:53
75阅读
大家好，这是一个为了梦想而保持学习的博客。这个专题会记录我对于 KAFKA 的学习和实战经验，希望对大家有所帮助。【生产 / 消费者模型】从上一节，我们知道消息中间件是由生产 / 消费者模型独立演化出来的，将对应的内存队列单独抽取成一个服务进行部署，以应对各个进程之间的需求。之后，我们的重点会落在 Broker 端的设计，真正的看一下，我们的服务端做了哪些架构设计，分别有什么作用？【Topic】T
转载
2024-03-21 21:49:33
46阅读
要监控公司的内网机器，老大推荐用Zabbix，网上了解下，也找了些资料，开始安装
特别感谢 梦~从这里起航的blog，对我的安装帮助很多。
一、环境介绍
Zabbix 需要依赖LAMP（Apache、Mysql、PhP）环境，Apache也可以使用Nginx代替，为了节省时间网上有很多一键安装的脚本，下载执行安装即可。
系统：rhel 5.5 X86_64
软件：nginx-0.8.53
推荐
原创
2012-10-16 21:28:38
10000+阅读
点赞
20评论
很早就想写一个zabbix监控的安装文档，比较懒，最近看了同事的zabbix服务器端安装文档，感觉总结的不错，就转了过来，原文地址为：http://song49.blog.51cto.com/4480450/1028718。
一、环境介绍
Zabbix 需要依赖LAMP（Apache、Mysql、PhP）环境，Apache也可以使用Nginx代替，为了节
转载
精选
2012-11-02 10:42:47
7039阅读
点赞
1评论
Socket编程Linux Socket编程领域为了处理大量连接请求场景，需要使用非阻塞I/O和复用，select、poll、epoll是Linux API提
转载
2022-11-04 10:03:03
120阅读
Darwin 5.5.5 代码分析文档
DarwinStreamServer 是苹果公司开发的流媒体视频服务器。我们分析的代码基于版
本5.5.5。
一、DSS启动、初始化流程
我们从Server.tproj/main.cpp入手，分析DSS加载module及和module交互的流程。
（1）、DSS在fork子进程后调用StartServer启动服务
调用OS
本文作者：matinal
回顾部分自从SAP推出HANA后，几乎把所有的模块都在往HANA上靠拢或者说集成。这样做必定要有其独特的优势。SAP HANA提供单一内存数据平台，支持各种数据的交易和分析，这是支持现代实时数字业务的应用的关键要求。在今天的数字经济中，企业无法改变过去已经发生的，真正的内存数据平台应该支持针对公司所有数据的交易和分析的实时处理。这是SAP HANA平台与其他传
1. apt-get update; apt-get install pptpd2 2. vim /etc/pptpd.conf # 修改客户端 ip 范围3 ...
转载
2015-05-05 15:26:00
189阅读
2评论
1）GitHub上下载Release包 https://github.com/dotnetcore/AgileConfig/tags 如果下载很慢，可以试试 GitHub 文件加速 注意：源码不包含UI源码，可以加群（1022985150）索取，将UI文件解压后放入/wwwroot/ui下即可 2） ...
转载
2021-11-01 16:25:00
952阅读
2评论
在本博文中，我将分享如何搭建一个基本的 Python 服务端。这个过程涵盖了环境准备、具体配置与测试验证，并介绍了一些优化技巧和故障排查的方法。通过这个步骤，我希望能帮助读者快速上手 Python 服务端的搭建。
## 环境准备
我们首先需要安装相关的软硬件。以下是我的系统配置和需求：
| 项目 | 要求 |
|-------------|---
