前提概要
什么是 MVCC什么是当前读和快照读？当前读，快照读和 MVCC 的关系MVCC 实现原理
隐式字段undo 日志Read View（读视图）整体流程MVCC 相关问题
RR 是如何在 RC 级的基础上解决不可重复读的？RC、RR 级别下的 InnoDB 快照读有什么不同？一、前提概要1、什么是 MVCC ？MVCC，全称 Multi-Version Concurren
一致性哈希最早由 MIT的 Karger 提出，在发表于1997年的论文 Consistent Hashing and Random Trees: Distributed Caching Protocols for Relieving Hot Spots on the World Wide Web， Karger et al 和合作者们提出了一致性哈希的概念(consistent hash
一个面试题：InnoDB 一棵 B+ 树可以存放多少行数据？这个问题的简单回答是：约 2 千万。
为什么是这么多呢？因为这是可以算出来的，要搞清楚这个问题，我们先从 InnoDB 索引数据结构、数据组织方式说起。
我们都知道计算机在存储数据的时候，有最小存储单元，这就好比我们今天进行现金的流通最小单位是一毛。
在计算机中磁盘存储数据最小
转载
2024-06-29 20:46:58
24阅读
# MySQL为什么占用大量内存
## 1.引言
MySQL是一款常用的关系型数据库管理系统，作为开发者，我们需要掌握MySQL的使用和性能优化。其中一个常见的问题是MySQL占用大量内存的原因。本文将详细介绍MySQL占用大量内存的原因及解决方法，帮助刚入行的开发者理解和解决这个问题。
## 2.问题描述
MySQL占用大量内存的情况通常出现在以下场景：
- 数据库服务器负载过高，导致内存不
原创
2023-11-10 03:40:03
80阅读
# MySQL CPU占用过高、内存占用低的问题及解决方案
## 1. 背景
MySQL是一个开源的关系型数据库管理系统，广泛用于各种应用场景中。然而，在实际使用过程中，我们可能会遇到MySQL CPU占用过高、内存占用低的问题。本文将介绍这个问题的原因，并提供一些解决方案。
## 2. 问题原因
MySQL CPU占用过高、内存占用低通常是由以下原因引起的：
### 2.1. 版本不兼
原创
2023-08-20 10:25:51
587阅读
导读：作者：知数堂学员-邓志航；MySQL DBA,天生的MySQL爱好者,热衷于为他人解决问题,善于总结和分享。对数据平台构建和排查疑难问题有非常浓厚的兴趣 一、简介:
MySQL基于linux的内存分析
二、关键指标定义
1、底层分配和释放内存
2、使用C标准库的malloc()或者mmap(),就可以在堆和文件映射段分配内存了,通过free(
转载
2024-06-24 18:09:39
71阅读
这篇文章主要是从原理, 手册和源码分析在PHP中查询MySQL返回大量结果时, 内存占用的问题, 同时对使用MySQL C API也有涉及.昨天, 有同事在PHP讨论群里提到, 他做的一个项目由于MySQL查询返回的结果太多(达10万条), 从而导致PHP内存不够用. 所以, 他问, 在执行下面的代码遍历返回的MySQL结果之前, 数据是否已经在内存中了? - while ($row =
转载
2024-08-06 15:10:28
35阅读
我是一个互联网公司的螺丝钉;魔术师耿mysql服务器性能瓶颈分析和内存优化前言开发阶段，对项目中mysql使用在代码层面已经做了最大努力的优化；大表减少关联查询，进行单表查关联字段添加索引（一个表最多16个索引,最大索引长度256字节）对关联查询建立联合索引，尽量走覆盖索引使用缓存，（java本地缓存；redis缓存）本地堆内缓存 HashMap,ConcurrentHashMap,Guava的
转载
2024-07-19 13:03:47
79阅读
主要分析系统内存占用过高的排查方法。 在Java开发中，对经常看到这两种异常：java.lang.OutOfMemoryError: PermGen spacejava.lang.OutOfMemoryError: Java heap space一、异常出现的原因1.Java.lang.OutOfMemoryError: PermGen spacePermGen space全称是Permanent
转载
2024-06-17 10:01:57
48阅读
导读：作者：知数堂学员-邓志航；MySQL DBA,天生的MySQL爱好者,热衷于为他人解决问题,善于总结和分享。对数据平台构建和排查疑难问题有非常浓厚的兴趣 一、简介:
MySQL基于linux的内存分析
二、关键指标定义
1、底层分配和释放内存
2、使用C标准库的malloc()或者mmap(),就可以在堆和文件映射段分配内存了,通过free(
转载
2024-06-12 23:37:01
74阅读
概述从zabbix监控发现某台数据库服务器经常发生内存告警，使用率达到95%，下面从连接数角度来分析一下该数据库服务器内存占用过高问题..1、查看数据库分配内存大小( mysql内存计算器，具体地址为http://www.mysqlcalculator.com/ )select VARIABLE_NAME,VARIABLE_VALUE/1024/1024 MB from information_s
转载
2023-12-15 06:33:25
323阅读
（元数据锁（MDL）的写锁之间互斥，读写锁之间互斥） 在学习之前，我们先看一个行锁的例子 注意：begin/start transaction 命令，在执行到第一个SQL语句时事务才真正启动。start transaction with consistent snapshot 命令马上启动事务。MySQL的事务提交方式默认都是autocommit=1。事务C没有显式地使用begin/commit，
转载
2024-10-23 22:38:30
3阅读
# 教你如何实现pytorch显存最少占用
## 介绍
作为一名经验丰富的开发者，我将指导你如何在使用pytorch时尽量减少显存的占用。通过一些小技巧和调整，可以使你的模型在训练或推理过程中更加高效地利用显存资源。
### 流程图
```mermaid
flowchart TD
A(开始)
B[加载数据]
C[定义模型]
D[设置优化器]
E[开始训练
原创
2024-03-12 05:41:47
35阅读
众所周知Redis 是一种内存数据库，下面是我给大家简单汇总的一个Redis处理数据的流程图，供大家学习了解！ 大家都清楚Redis内存占用情况：与存储的数据量、配置参数、服务器内存大小等因素有关。在默认情况下，Redis 会使用尽可能多的内存，直到服务器的内存资源被占满。那么大家知道，为什么在默认情况下Redis 会使用尽可能多的内存吗？因为Redis 是一个基于内存的数据存储系
转载
2023-09-19 00:50:41
142阅读
场景描述：使用top命令发现mysql占用cpu利用率非常高，相关表的数据量已经达到百万级别； 解决方法 1、show full processlist; 发现存在大量sleep线程；而大量sleep线程会占用连接数，当超过max_connections后无法建立新连接、并且可能仍有一些内存未释放，数量太多的话，是会消耗大量无谓的内存的，从而影响性能；// 设置最大连接数以及最长
转载
2024-05-31 08:56:49
54阅读
MySQL连接会话数占用内存MySQL 的内存占用与连接数连接池连接数模拟连接数结论2003 (HY000)2004 (HY000)间接的方法来评估SQL语句的内存占用情况 MySQL 的内存占用与连接数MySQL 的内存占用与连接数之间的关系是复杂的，具体取决于多个因素，包括配置设置、查询负载、数据大小和使用的存储引擎等。每个连接都需要一定的内存资源来维护连接状态、缓存查询结果和执行计划等。以
转载
2023-07-27 22:04:10
263阅读
估计有很多开发，或者刚刚接触MySQL数据库的运维人员，不太清楚，如何去计算MySQL数据库占用内存总大小。估计有时候，还会奇怪，明明设置的buffer pool size不大，数据库却因为操作系统内存不足，导致MySQL数据库进程被系统自动kill掉了。下面就来给你一一揭晓答案MySQL数据占用内存MySQL数据库占用操作系统内存，主要分为两部分第一部分为：innodb存储引擎占用的buffer
转载
2023-06-11 12:52:14
539阅读
背景介绍笔者在文章《MySQL 源码构建 Docker 镜像（基于 ARM 64 架构）》中曾提到过，为解决 Kylin V10 的兼容性问题，需要在 MySQL 容器启动脚本 docker-entrypoint.sh 的基础上单独添加 391 行。今天就来具体讲一讲背后的问题、原因，以及完整的解决过程。先说现象和结论，在 Kylin V10 下的
转载
2024-06-03 21:08:17
91阅读
MySQL介绍MySQL是由瑞典MySQL AB 公司（目前已经被SUN公司收归麾下）自主研发的，目前IT行业最流行的开放源码的数据库管理系统之一，它同时也是一个支持多线程高并发多用户的关系型数据库管理系统。MySQL数据库以其简单高效可靠的特点，短短几年的时间变成一个在IT行业几乎是无人不知的开源数据库管理系统。目前MySQL已经成为最为流行的开源关系数据库系统，并且一步一步
转载
2024-07-12 18:46:01
223阅读
# 如何下载大文件并保证占用内存最少？
在开发过程中，有时候我们需要从远程服务器下载大文件，比如日志文件、备份文件等。一般情况下，我们可以使用SFTP（Secure File Transfer Protocol）来进行文件的传输。但是当文件比较大时，我们需要考虑如何保证下载过程中占用的内存最小化，以避免内存溢出的风险。
## SFTP下载大文件的原理
SFTP是基于SSH协议的文件传输协议，
原创
2024-05-16 04:06:37
400阅读
