MySQL count() 函数我们并不陌生，用来统计每张表的行数。但如果你的表越来越大，且是 InnoDB 引擎的话，会发现计算的速度会越来越慢。在这篇文章里，会先介绍 count() 实现的原理及原因，然后是 count 不同用法的性能分析，最后给出需要频繁改变并需要统计表行数的解决方案。Count() 的实现InnoDB 和 MyISAM 是 MySQL 常用的数据引擎，由于两者实现的不同，
转载
2024-10-29 11:59:20
9阅读
# 如何实现 Redis RDB 文件上几十G
## 引言
Redis是一种高性能的内存数据库，但是由于内存资源的限制，当数据量过大时，会导致Redis无法继续存储数据。为了解决这个问题，Redis提供了RDB持久化机制，可以将内存中的数据保存到硬盘上的RDB文件中。
本文将向你介绍如何实现Redis RDB文件上几十G大小的存储，并提供详细的步骤和代码实例。
## 整体流程
下面是整个实现
原创
2024-01-01 08:18:55
73阅读
聚集索引的重要性和如何选择聚集索引
在上一节的标题中，笔者写的是：实现小数据量和海量数据的通用分页显示存储过程。这是因为在将本存储过程应用于“办公自动化”系统的实践中时，笔者发现这第三种存储过程在小数据量的情况下，有如下现象： 1、分页速度一般维持在1秒和3秒之间。 2、在查询最后一页时，速度一般为5秒至8秒，哪怕分页总数只有3页或30万页。 虽然在超大容量情况下，这个分页的实现过程是很快的，
原创
2023-04-30 09:58:34
95阅读
最近，一位开发者把自己在Steam上的游戏——SNKRX开源了，这一举动引发了网友们的关注。这款游戏几天前刚刚在Steam上线，售价是15元（促销价12元）。并且大部分网友给出了很高的评价：游戏非常有趣，价格还公道~这是一款Roguelite类型的游戏，主角是一条能自动攻击敌人的“战斗蛇”：并且可以用不同的组合，创造出独一无二的造型：现在，只需安装Steam平台，下载并运行存储库，就可以愉快的薅羊
最近在研究平台三维场景渲染中存在的问题，发现某些建筑物顶面的纹理在不同的观察距离会出现不同的显示，比如离的比较远，则会出现黑面、彩面、等，总之不是纹理贴图所应该有的纹理。平台加载的三维模型都是ive格式，无法查找具体原因，先利用osg自带的osgconv工具将ive转化为osg文件，以便查看顶点、面元、法线、纹理等如何组织，也可以将纹理从ive中释放为单个影像文件。释放后，检查osg文件，发现渲染
# 如何查找并删除占用大量磁盘空间的MySQL日志文件
作为一名经验丰富的开发者，我将向你解释如何查找并删除占用大量磁盘空间的MySQL日志文件。这将帮助你解决“mysql log文件夹占用几十GB”的问题。
## 流程
下面是整个过程的步骤，我们将通过表格来展示。
| 步骤 | 操作 |
| --- | ---- |
| 1 | 连接到MySQL服务器 |
| 2 | 查找日志文件的位置
原创
2023-07-27 10:40:56
170阅读
ListArrayList和LinkedList是我们常用的集合数据结构。他们的类结构以及依赖关系如下图。 ArrayList、Vector、LinkedList 集合类继承了 AbstractList 抽象类，而 AbstractList 实现了 List 接口，同时也继承了 AbstractCollection 抽象类。ArrayList、Vector、LinkedList 又根据自
转载
2024-10-14 18:30:00
23阅读
# 如何实现Java分割大型CSV文件
## 介绍
作为一名经验丰富的开发者，我将教你如何在Java中分割几十个G的CSV文件。这项任务可能对初学者有些挑战，但只要按照下面的步骤进行操作，你将能够成功完成。
## 流程图
```mermaid
flowchart TD
A(读取CSV文件) --> B(分割CSV文件) --> C(保存分割后的文件)
```
## 步骤表格
| 步骤
原创
2024-07-06 05:51:51
104阅读
## 使用MySQL导入几十GB的文件
在MySQL中，可以使用`source`命令来执行SQL脚本文件，将数据导入到数据库中。然而，当面对几十GB大小的文件时，直接使用`source`命令可能会遇到一些问题，例如内存溢出、导入速度慢等。本文将介绍如何优化导入大文件的过程，以及一些可行的解决方案。
### 导入大文件的问题
当使用`source`命令导入大文件时，可能会出现以下问题：
1.
原创
2023-09-30 07:30:51
1656阅读
# 如何实现MySQL数据库几十万张表
## 一、整体流程
```mermaid
journey
title 实现MySQL数据库几十万张表流程
section 第一步: 数据库设计
开发者 ->> 小白: 设计数据库表结构
section 第二步: 创建数据库和表
开发者 ->> 小白: 创建数据库
开发者 ->> 小白
原创
2024-07-02 04:01:31
48阅读
一、为什么需要持久化redis里有10gb数据，突然停电或者意外宕机了，再启动的时候10gb都没了？！所以需要持久化，宕机后再通过持久化文件将数据恢复。二、优缺点1、rdb文件rdb文件都是二进制，很小。比如内存数据有10gb，rdb文件可能就1gb，只是举例。2、优点由于rdb文件都是二进制文件，所以很小，在灾难恢复的时候会快些。他的效率(主进程处理命令的效率，而不是持久化的效率)相对于aof要
转载
2024-01-11 10:11:25
23阅读
# Java 文件上传压缩包的优化策略
在Java开发中，处理大文件上传是一个常见且具有挑战性的任务。特别是当涉及到几十G的压缩包时，传统的文件上传方式可能会导致性能瓶颈和用户体验下降。本文将探讨一些优化策略，并通过代码示例和图表来说明这些策略的实施过程。
## 为什么需要优化
传统的文件上传方式，如使用``标签，虽然简单易用，但在处理大文件时存在以下问题：
1. **内存消耗大**：整个
原创
2024-07-21 08:12:16
39阅读
# Java从数据库导出大量数据的方法
## 前言
在实际开发中，有时候需要从数据库中导出大量的数据，以进行数据分析、备份等操作。本文将介绍如何使用Java来实现这个功能，并指导一位刚入行的开发者完成这项任务。
## 整体流程
下面是导出数据的整体流程，我们将使用表格展示每个步骤。
步骤 | 描述
---|---
1 | 连接数据库
2 | 执行SQL查询
3 | 遍历查询结果
4 |
原创
2023-10-18 16:23:31
256阅读
系统环境window7+8g内存+250g硬盘+i5处理器+5000转1.创建表结构CREATE TABLE `test` (
`uid` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主键',
`zid` char(32) DEFAULT '' COMMENT '32位随机主键',
`name` varchar(50) DEFAULT '
转载
2024-07-22 17:24:48
53阅读
# 如何处理 Java 项目中的数据库连接问题
在 Java 项目中，数据库连接管理是一个至关重要的部分。如果项目启动后数据库多了好几十个连接，这通常是因为连接池没有得到合理的应用或是代码中存在连接未关闭的情况。接下来，我们将通过一个流程来帮助你理解如何更好地管理并优化数据库连接。
## 流程概述
我们将通过以下几个步骤来解决这个问题：
| 步骤 | 描述
第一部分：认识jar中的MANIFEST.MF文件一、MANIFEST.MF文件的基本配置信息：1.一般属性： Manifest-Version：定义manifest文件的版本 &nbs
转载
2024-10-25 10:58:51
37阅读
加锁是为了保证数据的一致性一、按照锁粒度进行划分 缺点优点表锁数据表进行锁定锁定粒度很大发生锁冲突的概率也会较高数据访问的并发度低对锁的使用开销小，加锁会很快页锁数据页的粒度上进行锁定锁定的数据资源比行锁要多，一个页中可以有多个行记录会出现数据浪费的现象，但这样的浪费最多也就是一个页上的数据行页锁的开销介于表锁和行锁之间，会出现死锁锁定粒度介于表锁和行锁之间会出现死锁并发度一般行锁行的粒度对数据
转载
2021-02-10 19:31:22
226阅读
2评论
数据库如何提高大数据量查询速度 1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select id from t where num is null可以在num上设置默认值0，确保表中num
转载
2024-07-16 19:04:42
31阅读
1.在一个目录下创建一个文件夹if (!System.IO.Directory.Exists(path))
System.IO.Directory.CreateDirectory(path);Stringpath=@”C:/新文件夹的名字”2.时间的字符串表示法20080616091219System.DateTime.Now.ToString("yyyyMMdd"), System.DateTi
select*from v$recovery_file_dest;select sum(percent_space_used)*3/100 from v$flash_recovery_area_usage;select * from v$flash_recovery_area_usage;select * from v$version;归档日志文件目录、最大值（已经设定为20G）、当前使用值可以看
转载
2024-07-11 14:10:26
227阅读
