nginx相关命令： 查看版本号：nginx -V 重新加载配置：nginx -s reload ：pstree -apn|grep pcntl Linux下运行nginx域名：curl http://nginx.23673.com 停止：nginx -s stop 退出：nginx -s quit 查看nginx服务：netstat -apn|grep 80 检查下nginx配置文件是否正确：s
转载
2023-09-22 21:32:19
107阅读
安装环境：
centos 6.5 64位
所需软件版本：
jdk1.8.0_171
nginx-1.12.2.tar.gz
kafka_2.11-0.10.2.1.tgz
zookeeper-3.4.5.tar.gz
scala-2.11.4.tgz
所需服务器：4台（三台安装scala、zookeeper和kafka，一台安装nginx）
【A:部署kafka集群
转载
2024-03-25 20:16:34
105阅读
缘起有一个埋点收集系统，架构是Nginx+Flume。web，小程序，App等客户端将数据报送至Nginx，Nginx将请求写入本地文件，然后Flume读取日志文件的数据，将日志写入Kafka。这个架构本来没什么问题，但是部署在K8s容器就有问题了，当前一个Nginx后面是3个Flume，Nginx根据渠道将日志写入web.log，mp.log，app.log，3个log文件各对应一个Flume将
Compiling and Installing From the SourcesUpdate 2016/01/28: Updated for nginx-1.8.1 And openssl-1.0.2e.最近使用源码安装Nginx，遇到了一些问题，特此记录下来。1 安装前准备：检测系统版本:$ uname -rms
Darwin 15.3.0 x86_64检测GCC版本：$ gcc -v
nginx-kafka-module是nginx的一个插件，可以将kafka整合到nginx中，便于……
原创
精选
2018-10-23 17:11:11
10000+阅读
点赞
1评论
nginx + uwsgi + django出现的问题那么在用了一段时间后发现一个很严重的问题：无论代码层如何优化，都会出现内存泄漏（内存占用无限增长）的问题，尝试过增加uwsgi.ini配置文件中添加参数：max-requests = 50，来对抗内存泄露（该参数用来控制每个进程处理50个请求后重启该进程）。但发现并没有什么用，当然网上还有其他折中方案，比如控制达到占用多少内存后自动重启uwsg
Kubernetes（K8S）是一种用于自动化部署、扩展和管理容器化应用程序的开源系统。在K8S中，我们经常会遇到需要使用nginx代理kafka的情况。nginx是一个高性能的反向代理服务器，可以提供负载均衡、缓存、SSL终结等功能，而kafka是一个分布式流处理平台，用于构建实时数据管道。在本文中，我将教会你如何在K8S中使用nginx代理kafka。
首先，让我们来看一下整个流程的步骤：
原创
2024-04-25 11:33:44
1115阅读
Linux 下Nginx+Tomcat 完美整合 nginx tomcat 整合方式随着IT行业的不断发展，个人、企业应用对网站的性能也不断的提高，从以前的apache+tomcat整合、weblogic等常见web应用，lighttpd、nginx 不断被企业应用，nginx+tomcat组合也应用的越来越广泛，下面是我的nginx+Tomcat整合方式，也参考有网上很多文章，谢谢他们！虽然网上
0.架构简介模拟线上的实时流，比如用户的操作日志，采集到数据后，进行处理，暂时只考虑数据的采集，使用Html+Jquery+Nginx+Ngx_kafka_module+Kafka来实现，其中Ngx_kafka_module 是开源的专门用来对接Nginx和Kafka的一个组件。1.需求描述1.1 用html和jquery 模拟用户请求日志其中包括下面下面几项：用户id:use
转载
2024-04-11 13:44:44
1226阅读
NGINX lua集成kafka第一步：进入opresty目录[root@node03 openresty]# cd /export/servers/openresty/
[root@node03 openresty]# ll
total 356
drwxr-xr-x 2 root root 4096 Jul 26 11:33 bin
drwxrwxr-x 44 1000 1000 40
转载
2024-07-27 22:29:18
814阅读
docker简易搭建kafka在我们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样的一些问题：想分析一下用户行为，一遍我能设计出更好的广告位，相对用户的搜索关键字尽心统计，分析出前卫的流行趋势，有些数据存数据库浪费，直接存硬盘操作效率又低。kafka在这样的场景下就是个不错的选择。第一步 搭建zookeeper环境在centos中，拉取zookeeper镜像，以及创建zookeeper
转载
2023-08-27 21:58:37
253阅读
本文记录了如何通过 docker-compose 快速启动 kafka，部署一套开发环境。参考修正：https://www.lixueduan.com/post/kafka/01-install/目录1. 概述2. docker-compose.yml镜像监控数据卷启动3. 测试1. 概述Kafka 是由 Apache 软件基金会旗下的一个开源 消息引擎系统。使用 docker-compose 来
转载
2024-02-02 16:30:25
52阅读
环境： Windows10 docker1、下载镜像打开命令行首先搜索想要下载的镜像docker search zookeeper可以看到有许多不同的版本，这里我们选择第一个官方版本，下载镜像（默认下载最新版本）docker pull zookeeper如果想要下载某一个版本的镜像可以使用指令docker pull zookeeper:version其中 : 后的version就是你想要的版本同理
转载
2023-12-14 14:59:56
78阅读
Kafka 是一个由 LinkedIn 开发的分布式消息系统。我之前写过文章介绍如何在 CentOS 下使用官方的原生安装包进行安装，本文介绍另一种方式：通过 Docker 来快速搭建 Kafka 以及 ZooKeeper 环境，使用这种方式可以免去很多安装配置上的麻烦。&nb
转载
2023-09-14 19:26:15
162阅读
# Kafka Docker 简介
## 什么是 Kafka?
Kafka是一种分布式流数据平台，用于可持续地发布和订阅记录流。它是由Apache软件基金会开发和维护的开源项目。Kafka是一个高性能、低延迟的分布式消息传递系统，被广泛应用于日志和实时数据流处理领域。
## 什么是 Docker?
Docker是一种开源的容器化平台，用于构建、发布和运行应用程序和服务。Docker容器提供
原创
2023-08-20 10:46:02
64阅读
一、运维日志在 Docker 容器中安装和配置 Kafka 环境。关于 Kafka 镜像可以在 Docker 官网镜像中搜索 Docker Hub
二、下载镜像 docker pull wurstmeister/kafka docker pull wurstmeister/zookeeper 二、启动 Zookeeper docker run -d --name zookeeper -p 2181
转载
2023-06-09 10:44:49
517阅读
反向代理作用隐藏服务器信息 -> 保证内网的安全，通常将反向代理作为公网访问地址，web服务器是内网，即通过nginx配置外网访问web服务器内网举例比如小编的码云个人博客地址为：http://zhengqingya.gitee.io/blog/ ，现在小编想通过自己的服务器地址 http://www.zhengqing520.com/blog/ 来访问到码云上
文章目录一、需求二、实现思路三、实现一、需求使用 Kafka 做日志收集。用户点击 HTML，Nginx 用于收集用户的点击数据流，记录_code）
原创
2022-10-21 16:19:15
211阅读
一、服务介绍1.1、ELKELK是三个开源软件的缩写，分别表示：Elasticsearch , Logstash, Kibana , 它们都是开源软件。新增了一个FileBeat，它是一个轻量级的日志收集处理工具(Agent)，Filebeat占用资源少，适合于在各个服务器上搜集日志后传输给Logstash，官方也推荐此工具。Elasticsearch是个开源分布式搜索引擎，提供搜集、分析、存储数
docker安装Kafka（结合ZK）一、docker安装zookeeper由于kafka需要依赖于zookeeper，因此这里先运行zookeeper1.拉取zookeeper镜像docker pull wurstmeister/zookeeper2.启动zookeeperdocker run -d --name zookeeper -p 2181:2181 -e TZ="Asia/Shangh
转载
2023-07-18 13:23:17
363阅读
