背景之前在做某个需求的时候用到了mysql binlog监听做相应业务处理的功能，比较简单所以采用了java的mysql-binlog-connector-java。 网上也有很多关于该插件的使用方法。但是到自己使用，上生产的时候又碰到几个问题。问题1.首先第一个，上线后发现binlog日志无法定位到最新的位置的问题。因为公司测试环境以磁盘空间有限，所以未开启binlog。所以我的测试只能在本地w
转载
2023-09-02 11:12:33
181阅读
一般情况下，日志最先反映出应用当前的问题，在海量日志里面找到我们异常记录，然后记录下来，并且根据情况报警，大家可以监控系统日志、nginx、Apache、业务日志。这边我拿常见的MySQL日志做监控，大家看演示。监控日志key首先要了解key，log[ file ,,,,,]file：文件名，写绝对路径regexp：要匹配内容的正则表达式，或者直接写你要检索的内容也可以，例如我想检索带
转载
2023-12-13 07:43:25
0阅读
一般情况下，日志最先反映出应用当前的问题，在海量日志里面找到我们异常记录，然后记录下来，并且根据情况报警，大家可以监控系统日志、nginx、Apache、业务日志。这边我拿常见的MySQL日志做监控，大家看演示。监控日志key首先要了解key，log[ file, <regexp>, <encoding>, <maxlines>, <mode>, &
转载
2024-01-19 10:03:48
2阅读
一、mysql日志mysql日志主要有三种日志：General Log(普通日志)、Slow Log(慢查询日志)、Error Log(错误日志)。其中General Log就是查询日志，要对sql执行语句进行监控就是设置General Log。Geleral log记录了服务器接收到的每一个查询或是命令，无论这些查询或是命令是否正确甚至是否包含语法错误，general log 都会将
转载
2023-12-24 14:17:32
51阅读
在生产环境中，常见MySQL架构使用最多的就是主从了，因此对于主从是否同步数据的监控尤为重要。如果使用了专业的监控软件（如zabbix）监控MySQL，那么选择监控工具提供的模板或插件去监控就很方便，但是如果涉及到一些特殊要求就另当别论了。我们可以写shell脚本来实现定制化的需求。本案例需要写一个shell脚本来监控MySQL主从，需求如下：1）每分钟检测一次，本次执行脚本时需检测上一次是否执行
转载
2024-02-28 10:59:58
45阅读
最近在项目中使用到缓存，感觉优雅的使用缓存工具比较麻烦，业界主流的缓存使用方法有先删除缓存在更新数据库，或者先更新数据库在删除缓存，只不过在业务代码中对数据操作不止一处，若想实现缓存数据的清除，必须在多处地方调用清除缓存的地方，麻烦不说，要是忘记某处数据更新未同步更新缓存数据，还会造成数据不一致的问题。 前几天在研究数据库主从同步的时候，发现 mysql 的 binlog
转载
2023-09-24 22:37:43
166阅读
前言 这一期是纯代码分享，最近我在服务器上安装了个MYSQL数据库，但自建的数据库肯定比不上云上的数据库，所以我开始想办法对其进行监控。接下来就分享我的监控脚本1.监控mysql的shell脚本#!/bin/bash
#取个标记变量，来判断是否发送告警信息
flag=0
#获取mysql服务的存活状态
active=`systemctl status mysqld
转载
2023-10-26 12:05:26
102阅读
作者：何白白业务背景写任何工具都不能脱离实际业务的背景。开始这个项目的时候是因为现有的项目中数据分布太零碎，零零散散的分布在好几个数据库中，没有统一的数据库来收集这些数据。这种情况下想做一个大而全的会员中心系统比较困难。(这边是一个以互联网保险为中心的项目，保单，会员等数据很零散的储存在好几个项目之中，并且项目之间的数据基本上是隔离的)。现有的项目数据库是在腾讯云中储存，虽然腾讯提供了数据同步功能
转载
2023-08-25 17:03:54
128阅读
上章我们把zabbix的服务端和客户端都部署完成了，本章接着进行两部分的设置：1 添加对mysql数据库主机的监控2 添加对mysql数据库的监控一、对数据库服务器主机监控1 创建主机步骤如下：组态>>主机>>创建主机进入创建主机的界面，如下，填写信息后保存。正确添加后状态是绿色的已启用：2、为主机添加模板模板添加完成后，出现绿色的表示监控成功了：解
转载
2023-11-17 19:03:57
61阅读
对于当前数据库的监控方式有很多，分为数据库自带、商用、开源三大类，每一种都有各自的特色；而对于 mysql 数据库由于其有很高的社区活跃度，监控方式更是多种多样，不管哪种监控方式最核心的就是监控数据，获取得到全面的监控数据后就是灵活的展示部分。那我们今天就介绍一下完全采用 mysql 自有方式采集获取监控数据，在单体下达到最快速、方便、损耗最小。本次文章完全使用 mysql 自带的 show 命令
转载
2023-08-31 11:33:33
88阅读
本文概要： 0、前言； 1、监控MySQL的哪些指标； 2、一目了然的MySQL监控的UI界面；
转载
2024-01-04 11:25:37
110阅读
mysql监控前几天跟几个人讨论到MySQL监控这块。发现自身有所欠缺，所以最近加班加点研究了一下。写个博文总结一下。一般来说对于mysql监控，会监控主库、从库的可用性。主从复制状态监控、数据库性能监控、数据库日志监控。对于可用性的监控，可以通过定期去执行sql实现。这里需要注意的是主库需要监控可写入性。数据库性能的监控，就是去监控数据库的一些状态值，对这些状态进行直接、间接（不同状态值计算）的
转载
2023-08-31 06:56:20
93阅读
1 功能性指标入门理解： 功能类指标可用性 数据库是否可正常对外提供服务
阻塞 当前是否有阻塞的会话（一个事务对一个数据库的资源加了排它锁）
死锁 当前事务是否产生了死锁 （两个事务相互之间锁住了互相锁住的资源）
MySQL处理死锁的两种方式
等待，直到超时。（innodb_lock_wait_timeout=50s）
发起死锁检测，主动回滚一条事务(会选
转载
2023-08-11 15:50:52
63阅读
MySQL性能监控1.基本监控系统方法在Linux操作系统中，用户可以使用一些分析系统性能的命令去分析数据库服务器性能。1.ps命令ps命令主要用来获取对于某个进程的一些信息。2.top命令top命令是Linux系统下最常用的性能分析工具，能够实时的显示操作系统中各个进程消耗资源的情况。该命令可以显示CPU使用、内存使用和执行时间；3.vmstat命令vmstat命令可以用来显示Linux性能指标
转载
2023-08-02 21:05:51
125阅读
文章目录zabbix 监控mysql3.1 监控Mysql什么内容3.2 如何监控mysql状态3.3 mysql状态监控实践3.3.1 环境准备3.3.2 编写监控脚本3.3.3 添加自定义监控项3.3.4 服务器端测试取值3.web3.5 配置zabbix-web3.3.6 编写测试脚本3.4 监控mysql主从状态3.4.1 mysql主从监控说明3.4.2 搭建mysql主从环境3.4.
转载
2023-10-18 23:07:31
66阅读
场景各个系统模块之间的数据库是独立的，而我开发的功能需要使用到业务库中员工和角色的信息，因此使用了cannal将业务库中的员工和角色表信息实时同步到自己的库中。思路canal监听数据库二进制日志（binlog）的变动解析生成sql语句通过目标库的数据库连接Connection，创建Statement执行对应的sql语句，完成数据同步步骤安装mysql首先需要安装好 mysql，用来作为数据提供方（
转载
2023-10-10 09:24:43
98阅读
监控工具MySQL监控是一个很大复杂的任务，不同的应用有着不同的需求。“监控”是大家滥用的术语之一，承载了几重意思。我们讲到的监控工具被分为非互动的和互动的两类。非互动监控常常就是一个自动化系统，它接收系统的测量值，如果有超出安全范围的，就通过发出警告提醒管理员。互动监控工具可以让你实时地观测服务器。你可能对监控工具在其他方面的差别也很感兴趣，例如被动监控和主动监控，后者会发送报警信息并作出初步反
转载
2023-08-16 18:32:36
154阅读
MySQL监控工具——innotopinnotop是一个mysql数据库实时监控工具,其功能强大,信息种类繁多,很能体现数据库的状态.它实际上是一个perl脚本,整合show status/show variables/show engine innodb status输出结果并进行统计和格式化输出.一、安装:$ yum install -y innotop二、用法:$ innotop -u -p
转载
2023-08-18 18:57:27
127阅读
监控Mysql需要在nagios和Mysql服务器这两个部分做处理:Mysql服务器安装nrpe、创建Mysql监控用户;配置nagios及用htpasswd创建浏览器验证帐号。下面分步描述。 一、 在Mysql服务器安装nrpe. 这个操作与nagios服务器安装nrpe基本相同，唯一不同的是nrpe.cfg文件server_address,把它改成Mysql服务器的ip地址即可
转载
2024-07-21 17:47:40
21阅读
业务背景写任何工具都不能脱离实际业务的背景。开始这个项目的时候是因为现有的项目中数据分布太零碎，零零散散的分布在好几个数据库中，没有统一的数据库来收集这些数据。这种情况下想做一个大而全的会员中心系统比较困难。(这边是一个以互联网保险为中心的项目，保单，会员等数据很零散的储存在好几个项目之中，并且项目之间的数据基本上是隔离的)。现有的项目数据库是在腾讯云中储存，虽然腾讯提供了数据同步功能，但是这样必
转载
2023-08-28 22:02:17
72阅读
