一、什么是磁盘碎片?其实磁盘碎片应该称为文件碎片,是因为文件被分散保存到整个磁盘的不同地方,而不是连续地保存在磁盘连续的簇中形成的。当应用程序所需的物理内存不足时,一般操作系统会在硬盘中产生临时交换文件,用该文件所占用的硬盘空间虚拟成内存。虚拟内存管理程序会对硬盘频繁读写,产生大量的碎片,这是产生硬盘碎片的主要原因。其他如IE浏览器浏览信息时生成的临时文件或临时文件目录的设置也会造成系统中形成大量
一、硬盘类型服务器中的固态硬盘硬盘驱动器提供更高的磁盘读/写速度，也称为输入/输出(I/O)性能。具有读取和写入磁盘的服务器速度更快，但定价明显高于同等存储容量的硬盘。二、硬盘存储空间 服务器的硬盘存储是本地数据库大小和文件的本地存储的限制因素。配置RAID磁盘阵列可有效增加数据可靠性，添加读取/写入(I/O)功能，RAID需要两个以上单独的存储卷。存储还可以采取网络存储的形式，如(网络连接存储)
昨天需要导入数据，大概一个10M多点的sql文件，开始没导入过这么大的，用sqlyog和mysql的控制台导入都非常慢，大概3个小时了才50%，于是开始查怎么提速。 文章分三个部分， 1 影响速度的因素， 2 介绍如何操作， 3 一些关于my.ini的问题以及操作指令链接。一、影响因素总结下来如下： 主要原因是mysql的数据保护机制，当前导入数据的方式比较安全，校验比较多，所以非常慢。 关于参数
转载
2023-06-12 18:41:46
193阅读
背景： 根据上图可以看到QPS：10.73k,实际上真实的并发大量数据到达的时候，我这里最高的QPS是将近15k.而目前单个数据库分片（实例）4CPU8G内存的配置下，最高的性能是7k的QPS。 基于上篇我进行了分库分表是对于性能有很大的提高，分库分表实践和中间件的引申 我这里讲解的例子是目前4主8从库（12个实例），以下每个实例都会称为分片。单个分片配置mysql版本5.7.19（一会说明不同版
转载
2024-02-19 22:32:43
56阅读
目录前言一、写-写情况二、写-读，读-写情况前言事务在并发是可能引发一致性问题的各种现象。并发事务访问相同的数据的情况有三种：读-读：两个事务同事进行读取。并发事务相继读取相同的记录。读取操作本身不会对记录有任何影响，不会引起什么问题，所以这是允许这种情况发生。写-写：两个事务一起在写写-读，读-写，当一个事务在读，一个事务在写的情况。一、写-写情况 &nbs
转载
2023-08-10 06:34:12
116阅读
利用navicat写mysql的存储过程转载：最近项目经理让我给新的活动的预留一个插入红包和查看详情的sql，方便在项目出问题的做一些紧急操作,我想了下这里面还涉及到挺多逻辑和挺多表的一句句查也不方便啊，干脆写到存储过程里，于是开始在navicat写存储过程，因为是第一次写，在此记录一下，方便下次查看1：选择新建函数。2：新建函数后会出现下面的界面，要是你不确定存储过程的输入输出值，可以直接点击完
转载
2024-06-04 21:25:20
35阅读
一、插入流程在分析了整个SqlCmd的流程后，下来深入看一下插入数据要做的流程动作，数据库最常用的是查询，但是数据的插入也不遑多让。insert是DML操作，所以仍然从上篇的相关文件即sql_insert.cc开始看起，看它的execute这个虚拟函数是如何执行的，从这里出发，直到文件落盘，大致分为以下几步： 1、打开插入表并准备各种检查工作，包括区分Select类型的Insert等。 2、锁定表
转载
2023-09-20 16:03:22
132阅读
1、日志item介绍下面介绍zabbix另一个“重量级”的功能——日志文件监控，它最主要的是监控日志文件中有没有某个字符串的表达式，对应日志轮转与否，zabbix都支持。 在配置Item的时候，Type选择Zabbix agent (active)，这里主要需要配置的是Key。下面是监控日志的两种key——log和logtr。 log[/path/to/some/file,,,,,] logtr[
转载
2024-03-01 14:24:39
109阅读
概述queue（队列）显示监控项等待刷新的时间,可以看到每种agent类型刷新时间，通过queue可以更好的体现出监控的一个指标.正常情况下，是一片绿色。如果出现过多红色，那么需要留意一下。我们也可以在右上角的下拉条选detail，可以找出到底是哪个item的问题。读取队列点击Administration（管理） → Queue（队列）. 下拉框三个选项，分别为overview、overview
转载
2024-05-08 23:46:53
41阅读
一、Elasticsearch概述： Elasticsearch是一个功能强大、性能高效、易于使用和扩展的分布式搜索和分析引擎，已被广泛应用于日志分析、企业搜索、电子商务等领域。Elasticsearch是一个基于Lucene的分布式搜索和分析引擎，它能够快速存储、搜索和分析大量的数据。它支持多种数据类型
转载
2024-07-02 13:51:43
166阅读
# Zabbix和MySQL的监控
## 介绍
在现代的IT环境中，监控是一个重要的部分。它帮助我们了解系统的健康状况、性能和可用性，并帮助我们及时发现和解决问题。Zabbix是一个广泛使用的开源监控解决方案，它可以监控各种类型的设备、服务器和应用程序。MySQL是一个流行的开源关系型数据库，它在许多应用程序中被广泛使用。本文将介绍如何使用Zabbix监控MySQL数据库，并提供一些示例代码。
原创
2023-08-16 07:14:13
44阅读
LOAD DATA INFILE 命令
LOCAL
LOCALLOAD DATA [LOW_PRIORITY] [LOCAL] INFILE 'file_name.txt' [REPLACE | IGNORE]INTO TABLE tbl_name[FIELDS[TERMINATED BY '\t'][OPTIONALLY] ENCLOSED BY ''][ESCAPED BY '\\' ]][L
转载
2023-08-22 21:11:07
140阅读
相信从事大数据开发的人员，越来越多的人从事实时计算方向，flink技术就显示十分重要，说该技术重要，不仅仅是因为它的流式计算，更多的是和其他技术的整合比较强大，在开发过程中，除了写入消息中间件等场景，有的时候也需要写入传统的数据库，如Oracle或者MySql。我们习惯于连接关系型数据库的时候采用一些连接池如c3p0，在传统的业务开发或者数据量不是很大的时候，是没有问题的，但是在大数据量的情况，这
转载
2023-08-30 18:56:08
219阅读
当我们通过测试发现SQL注入，或拿到像phpMyAdmin之类的web数据库可视化管理工具，并想要进行下一步渗透的时候，可通过数据库写入webshell到目标服务器上，利用webshell管理工具控制目标服务器。下面将讲述几个通过MySQL数据库写入webshell的方法，以拿到phpMyAdmin为例。-01-通过outfile写入shell利用条件：1、root权限2、网站的绝对路径且具有写入
转载
2023-09-29 07:37:24
5阅读
一、INSERT和REPLACEINSERT和REPLACE语句的功能都是向表中插入新的数据。这两条语句的语法类似。它们的主要区别是如何处理重复的数据。 1. INSERT的一般用法MySQL中的INSERT语句和标准的INSERT不太一样，在标准的SQL语句中，一次插入一条记录的INSERT语句只有一种形式。INSERT INTO tablename(列名…) VALUES(列值);而
转载
2024-07-06 08:12:09
19阅读
写入原理为了支持让已经写入的数据支持回滚，要先将写入的数据（插入，更新）旧值写入磁盘的Undo Log中然后将数据写入内存的BufferPool中，之后InnoDB会让小线程门把需要更新写入的数据读出来，写入磁盘文件为了避免mysql断电导致内存中Buffer Pool中没来及写入磁盘的数据丢失，需要将”“更新写入信息”放到Redo Log Buffer和Redo LogRedo Log刷盘策略参
转载
2023-06-27 15:38:01
196阅读
使用MySQL插入数据时，可以根据需求场景选择合适的插入语句，例如当数据重复时如何插入数据，如何从另一个表导入数据，如何批量插入数据等场景。本文通过给出每个使用场景下的实例来说明数据插入的实现过程和方法。一、方法分类 二、具体方法 使用场景作用语句注意常规插入忽略字段名insert into 表名 values (值1, 值2,...,值n)默认value中的值依次填充所有字，如
转载
2023-09-16 21:43:44
214阅读
一个伪新手的成长史废话不多说，最近来了新疆，重新拿起丢弃的代码员行业。以前也不是做java的，现在要回
来，直接上手框架jeesite
开始新的码农之路。
第一天上班比较懵逼，看了一下jeesite改了一下前端。
现在从第二天写起。
鉴于是一个纯粹的后端，就从数据库的 存储过程和触发器开始，今天内容， 存储过程。
触发器。数据先行，先开数据库，跳过增删查改select () from * wh
转载
2023-11-10 08:57:17
6阅读
在临近上线之前，我们系统做了一次压力测试，发现有一个接口在高并发情况下会出现一个死锁的情况。。首先申明…不是我写的，我只是帮忙排查下。随着对Mysql锁的深入了解，于是就准备写几篇文章来记录下Mysql各种事物和索引的情况下出现死锁的情况。今天就介绍下在并发插入的情况下，哪几种情况会出现死锁：INNODB下的各种锁在介绍锁的时候只会介绍跟本节相关的锁，而且只会讲述大概是什么，至于锁的更加详细的讲解
转载
2023-08-08 14:36:47
280阅读
binlog的写入机制事务执行过程中，先把日志写到binlog cache，事务提交的时候，再把binlog cache写到binlog文件中。 一个事务的binlog是不能被拆开的，因此不论这个事务多大，也要确保一次性写入。 系统给binlog cache分配了一片内存，每个线程一个，参数 binlog_cache_size用于控制单个线程内binlog cache所占内存的大小。如果超过了这个
转载
2023-09-22 10:56:57
41阅读
