不想听我啰嗦的，可以直接看最终配置 写完一步一个脚印实现logstash同步MySQL数据到ES后，想试试多表保存到ES里，原本以为只要多复制几个JDBC加个type就可以搞定，结果悲剧的发现都是问题，在这里记录一下需要注意的问题需要注意的配置tracking_column报错信息 lastmodifiedTime一定要在你查询的结果集里面 tracking_column => "lastm
转载
2024-03-01 14:02:58
17阅读
Logstash是一个开源的用于收集，分析和存储日志的工具。 Kibana4用来搜索和查看Logstash已索引的日志的web接口。这两个工具都基于Elasticsearch。
● Logstash: Logstash服务的组件，用于处理传入的日志。
● Elasticsearch: 存储所有日志
● Kibana 4: 用于搜索和可视化的日志的Web界面，通过nginx
转载
2024-09-11 19:21:11
56阅读
一、 Elastic Stack Elastic Stack是ELK的官方称呼，网址：https://www.elastic.co/cn/products ，其作用是“构建在开源基础之上, Elastic Stack 让您能够安全可靠地获取任何来源、任何格式的数据，并且能够实时地对数据进行搜索、分析和可视化。”它主要包括三个元件：Beats + Logstash：采集任何格式
昨日内容回顾: (1)logstash的安装部署及常用的参数
-r:
热加载配置文件。
-t:
检查配置文件语法是否正确。
-f:
指定自定义的配置文件，若不指定，则读取pipline.yaml配置文件。
-e:
这几天捣鼓公司网站，采用nginx+tomcat协同工作，里面一些东西做一下相关备份，以备后来工作中的使用 1、停止nginx：停止操作是通过向nginx进程发送信号来进行的 步骤1：查询nginx主进程号 ps -ef | grep nginx 在进程列表里 面找master进程，它的编号就是主进程号了。 步骤2：发送信号 从容停止Nginx： kill -QUIT 主进程号 快速停止Ngin
转载
2024-08-21 10:57:12
116阅读
location配置规则的优先级从高到低顺序排列。配置规则：location = /uri 精确匹配urilocation = /(uri|abc) 包含uri或abclocation ^~ /uri 前缀匹配urilocation ~ /uri 表示uri包含正则，并且区分大小写location ~* /uri 表示uri包含正则，但不区分大小写location / 通用匹配Nginx服务器会首
转载
2024-03-31 12:44:56
121阅读
对于nginx连接fastcgi的两种不同方式做了测试，结果如下。 Tcp是使用TCP端口连接127.0.0.1:9000 Socket是使用unix domain socket连接套接字/dev/shm/php-cgi.sock 测试机是个1核的centos5.4，2用户并发时系统资源消耗50%左右，10用户资源就跑得很满了。 2users 10users nginx/1.2.9 + PHP
转载
2024-05-05 20:20:13
174阅读
Nginx Rewrite 是利用 nginx 提供的全局变量或自己设置的变量，结合正则表达式和标志位实现 url 重写以及重定向。rewrite 只能放在 server{}, location{}, if{} 中，并且只能对域名后边的除去传递的参数外的字符串起作用，例如 http://seanlook.com/a/we/index.php?id=1&u=str 只
转载
2024-03-12 18:46:43
82阅读
文章目录1. 概述2. location格式3. location匹配参数解释4. location匹配顺序4.1 匹配顺序精炼5. 匹配问号后的参数6. location URI结尾带不带/7. 命名location8. 案例 1. 概述location指令是nginx中最关键的指令之一，location指令的功能是用来匹配不同的url请求，进而对请求做不同的处理和响应，这其中较难理解的是多个
转载
2024-03-23 09:14:20
46阅读
rsyslog是日志收集工具。如今非常多Linux都自带rsyslog，用其替换掉syslog。怎样安装rsyslog就不讲了。大概讲下原理。然后讲logstash的相关配置。rsyslog本身有一个配置文件 /etc/rsyslog.conf，里面定义了日志文件。以及对应保存的地址。下面述语句为例：local7.*
转载
2024-04-08 19:00:03
26阅读
ELK日志分析平台logstash数据采集1.logstash简介2.Logstash安装3.标准输入到标准输出4.标准输入到文件5.标准输入到es主机6.指定文件输入到es主机7.sincedb8.远程日志输入9.多行过滤插件10.grok过滤11.apache服务日志过滤实战 logstash数据采集1.logstash简介Logstash是一个开源的服务器端数据处理管道。logstash拥
转载
2024-04-23 16:26:49
143阅读
前言本教程为什么第三节才说到Logstash？ 因为本人在阅读其他网络上的相关资料的时候，很多第一篇都是先安装Logstash，最后运行输出elasticsearch没法看出效果，请看下一节之类！到了下一节又没有相关说明，直接又截图出效果，感觉让人懵逼！所以本教程特意把顺序调整了一下。Logstash安装和使用Logstash的独立性很强，它的用途就是一个内容的转存系统，通过灵活的插件可以做到很多
转载
2024-07-21 09:16:58
76阅读
文章目录logstash下载安装SpringBoot整合logstash、es采集日志fileBeat实现日志采集 使用日志采集的话，先安装es、kinaba…可以参考我之前的文章：logstash下载安装我下载的版本是：windows的8.1.2，其他版本自己采坑哦。。修改配置文件：logstash.conf，没有自己建一个input {
file {
# 这个路径还必须用/这个斜杆，不
转载
2024-05-15 11:58:04
58阅读
nginx域名代理域名
原创
2020-05-11 14:36:40
2084阅读
在使用lnmp一键安装包安装环境的时候，配置好了nginx，访问域名时却发现报了404错误，用静态文件缉检查路径是对的，说明php的解析有问题。在网上找到的nginx配置也是无法使用，因此，在此简单总结一下。1.首先找到自己的nginx.conf在哪里whereis nginx.conf 该命令可以用来查找文件位置2.然后进入该目录打开nginx.conf查看一下：简单查看一下几个比较重要的参数1
转载
2024-02-11 11:21:44
160阅读
此配置 需要先进阿里云官网，再进入 万网里面进行解析域名，再用Nginx命令进行配置，，，如果没有申请端口号，则要先去申请了再进行解析一、申请端口号。1.进入阿里云=>进入实例=>管理实例=>安全组规则=>右上角 添加安全组规则（寻找一个常用的端口，添加一个即可比如说 88 端口，，添加页面 端口范围填：88/88，授权对象填：0.0.0.0/0）&
转载
2024-05-06 09:50:46
491阅读
写之前，先讲需求，讲一下这个能帮我们做什么，我有没有必要看。我发现有很多文章，都是调情都还没开始，裤子脱了就开始啪啪啪，啪完了才知道，我去，我要的不是这个。 我们买了一个服务器，买了一个域名。然后我要让这个域名访问这个服务器，我怎么访问。我输入 www.yourHost.com 这样访问吗？这样访问的是你那台机器的80端口，你说那还不简单，那我访问的时候 直接输入 www.yo
转载
2024-03-07 07:40:19
260阅读
文章目录一、域名、dns、ip地址之间的关系二、浏览器、nginx与http协议三、虚拟主机原理四、域名解析与泛解析1.公网ip解析2.内网ip解析五、域名解析相关企业项目实战技术架构1.多用户二级域名2.短网址3.httpDNS 一、域名、dns、ip地址之间的关系域名代表了一个公司、一个人或者一个组织，域名后缀分为很多种，其中com代表一个公司,cn代表中国等 有了域名就可以访问DNS服务器
转载
2024-04-21 10:33:35
161阅读
proxy_pass 只能将请求进行转发，而rewrite的功能就多喽，如可以调整用户浏览的 URL，看起来更规范，合乎开发及产品人员的需求。为了让搜索引擎搜录网站内容及用户体验更好，企业会将动态 URL 地址伪装成静态地址提供服务。网址换新域名后，让旧的访问跳转到新的域名上。例如，访问京东的 360buy.com 会跳转到 jd.com根据特殊变量、目录、客户端的信息进行 URL 调整等rewr
转载
2024-04-11 13:39:59
255阅读
前言1、基本命令1.1、启动Linux ./nginx -c conf/nginx.conf
windows start nginx1.2、停止./nginx -s stop1.3、有序退出./nginx -s quit1.4、配置修改后，重新载入./nginx -s reload1.5、重启./nginx -s reopen1.6、检测配置文件./nginx -t1.7、平滑重启kill -H
转载
2024-08-16 11:50:31
175阅读
