架构回顾在数据量不是很多的情况下，我们可以将数据库进行读写分离，以应对高并发的需求，通过水平扩展从库，来缓解查询的压力。如下：在数据量达到500万的时候，这时数据量预估千万级别，我们可以将数据进行分表存储。在数据量继续扩大，这时可以考虑分库分表，将数据存储在不同数据库的不同表中，如下：案例详解本案例有6个数据库，两个主库，四个从库，信息如下：数据库类型数据库ip主cool10.0.0.3从cool
转载
2024-07-23 21:55:40
174阅读
创建logback.xml：resources路径下创建该文件，并复制如下代码。<?xml version="1.0" encoding="UTF-8"?>
<!--
scan：当此属性设置为true时，配置文件如果发生改变，将会被重新加载，默认值为true。
scanPeriod：设置监测配置文件是否有修改的时间间隔，如果没有给出时间单位，默认单位是毫秒当scan为true时，
转载
2024-04-07 06:44:09
101阅读
# 实现"mysql PARTITION 按日分表"教程
## 介绍
作为一名经验丰富的开发者，我将教你如何在MySQL数据库中实现按日分表，即使用PARTITION功能。这样可以提高数据库的性能和查询效率，同时也更便于维护和管理。
## 教程流程
首先，让我们来看一下整个实现过程的步骤：
```mermaid
journey
title 实现"mysql PARTITION 按日分
原创
2024-06-20 04:35:20
35阅读
【SpringBoot高级篇】SpringBoot集成Sharding-JDBC分库分表Apache ShardingSphere分库分表分库分表的方式垂直切分垂直分表垂直分库水平切分水平分库水平分表分库分表带来的问题分库分表中间件Sharding-JDBCsharding-jdbc实现水平分表db脚本pomOrderapplication.yml水平分表测试sharding-jdbc实现水平分
转载
2023-10-09 09:59:26
369阅读
前言 本项目分表方案是按照时间字段按日分表 其他分表方案也可参考本文档实现自动建表 需要提前准备待分表的主表写入数据库 优势: 可以实现自动建表 且不需要配置 SQL 范围分表查询时自动排除不存在的表 劣势: 批量插入时会重复查询是否已存在此表 虽然做了缓存但架不住批量插入时查询次数过大 会比较慢 ...
转载
2021-08-20 16:31:00
6194阅读
3评论
# 如何在Spring Boot中配置MySQL按年度分表
## 介绍
在实际开发中，为了更好地管理数据库数据，我们经常会将数据按照一定的规则进行分表存储。本文将教你如何在Spring Boot项目中配置MySQL按年度分表，让数据更有组织性和可读性。
### 流程图
```mermaid
journey
title 数据库按年度分表配置流程
section 配置流程
原创
2024-03-03 05:46:05
292阅读
一. 前言前几天时间写了如何使用Sharding-JDBC进行分库分表和读写分离的例子，相信能够感受到Sharding-JDBC的强大了，而且使用配置都非常干净。官方支持的功能还很多功能分布式主键、强制路由等。这里是最终版介绍下如何在分库分表的基础上集成读写分离的功能。二. 项目实战主从数据库配置在配置前，我们希望分库分表规则和之前保持一致：基于user表，根据id进行分库，如果id mod 2为
转载
2024-03-27 12:35:17
0阅读
# 实现Mysql表按日期分表的方法
## 一、整体流程
首先，让我们来看一下整个“mysql表按日期分表”的实现流程，我们可以通过以下表格来展示：
| 步骤 | 操作 |
| ---- | ---- |
| 1 | 创建一个存储过程，用于根据日期创建表 |
| 2 | 在存储过程中，判断当前日期对应的表是否存在，若不存在则创建新表 |
| 3 | 修改应用程序的代码，使其在插入数据时根据日
原创
2024-06-06 06:24:22
120阅读
有关分库分表前面写了三篇博客:1、分库分表(1) --- 理论2、分库分表(2) --- ShardingSphere(理论)这篇博客通过ShardingSphere实现分表不分库，并在文章最下方附上项目Github地址。一、项目概述1、技术架构项目总体技术选型SpringBoot2.0.6 + shardingsphere4.0.0-RC1 + Maven3.5.4 + MySQL + lom
转载
2024-06-03 11:19:52
94阅读
引言：由于公司转型，使我原本android开发工程师，转变为后台开发工程师，对于后台，除了大学利用servlet写过些项目，其他就一无所知。公司使用spring-boot框架.那么spring-boot框架究竟是什么呢？Spring-boot是微框架，是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员
转载
2023-10-09 13:54:43
173阅读
分库分表(4)--- ShardingSphere实现分表有关分库分表前面写了三篇博客:这篇博客通过ShardingSphere实现分表不分库，并在文章最下方附上项目Github地址。一、项目概述1、技术架构项目总体技术选型SpringBoot2.0.6 + shardingsphere4.0.0-RC1 + Maven3.5.4 + MySQL + lombok(插件)2、项目说明场景 在实际开
转载
2024-05-31 13:37:17
51阅读
## MySQL 按周分表的实现指南
在日常的开发中，随着数据量的不断增长，我们常常需要对数据库表进行分区或分表，以提高查询和管理的效率。本文将逐步教你如何在 MySQL 中按周分表，包括整个流程、每一步需要执行的操作及相应的代码。
### 整体流程
首先，下面的表格展示了实现“按周分表”的步骤：
| 步骤 | 说明 |
|------|------|
| 1 | 确定分表的策略 |
原创
2024-10-02 05:24:51
106阅读
## MySQL按装置分表
### 1. 引言
在大规模数据存储和处理的系统中，为了提高性能和可扩展性，我们常常需要将数据分散到多个表中。MySQL作为一种常用的关系型数据库，提供了分表技术来解决数据量过大的问题。本文将介绍如何使用MySQL进行按装置分表，以及具体的代码示例。
### 2. 什么是按装置分表
按装置分表是指根据某个特定的属性或规则，将数据分散到多个表中。在实际应用中，一个常见
原创
2024-01-25 09:24:46
58阅读
本文介绍一些mysql中用于查询的sql语句，包括按年度、季度、月度、周、日统计查询等，有需要的朋友，可以参考下。
一、年度查询
查询 本年度的数据
SELECT *
FROM blog_article
WHERE year( FROM_UNIXTIME( BlogCreateTime ) ) = year( curdate( ))
二、查询季度数据
查询数据附带季度数
SELECT Articl
转载
2024-06-15 10:38:35
61阅读
在做基于mybatis持久层开发时，由于单表数据量增大，可能会考虑分表进行处理，可以采用sharding-jdbc实现，这里基于mybatis自定义实现分表组件进行实现，重点思考其实现逻辑和设计模式，学习底层原理。 具体涉及到的多表联查，可进一步思考如何实现。 分表需求：自定义分表策略，可以为id取模，日期取月；可以通过注解进行引用； 前提：需提取建好表结构； 核心逻辑：通过拦截器，根据分表策略得
转载
2024-04-19 12:21:53
77阅读
ShardingSphere JDBC，定位为轻量级 Java 框架，在 Java 的 JDBC 层提供的额外服务。 它使用客户端直连数据库，以 jar 包形式提供服务，无需额外部署和依赖，可理解为增强版的 JDBC 驱动，完全兼容 JDBC 和各种 ORM 框架。 适用于任何基于 JDBC 的 ORM 框架，如：JPA, Hibernate, Mybatis, Spring JDBC Templ
转载
2023-10-07 20:29:43
391阅读
Spring Boot 作为主流微服务框架，拥有成熟的社区生态。市场应用广泛，为了方便大家，整理了一个基于spring boot的常用中间件快速集成入门系列手册，涉及RPC、缓存、消息队列、分库分表、注册中心、分布式配置等常用开源组件互联网高速发展，同时也带来的海量数据存储问题。传统关系型数据库的单库单表已经很难支撑，如何高效存储和访问这些数据，成为业内急需解决的问题。解决思路有两个方向：NoSQ
转载
2023-09-23 07:40:57
223阅读
之前一篇文章中我们讲了基于Mysql8的读写分离(文末有链接)，这次来说说分库分表的实现过程。概念解析垂直分片 按照业务拆分的方式称为垂直分片，又称为纵向拆分，它的核心理念是专库专用。 在拆分之前，一个 数据库由多个数据表构成，每个表对应着不同的业务。而拆分之后，则是按照业务将表进行归类，分布到不同的数据库中，从而将压力分散至不同的数据库。 下图展示了根据业务需要，将用户表和订单表垂直分片到不同的
转载
2024-04-01 00:34:26
60阅读
中文官网 https://shardingsphere.apache.org/index_zh.html 参考地址 https://shardingsphere.apache.org/document/legacy/4.x/document/cn/manual/sharding-jdbc/configuration/config-spring-boot/本文Gitee地址https://gitee
转载
2024-03-07 18:13:58
153阅读
## Spring Boot Logback 按日志级别输出日志
### 1. 流程图
```mermaid
graph TD
A[新建Spring Boot项目] --> B[导入logback依赖]
B --> C[配置logback.xml]
C --> D[编写代码]
```
### 2. 步骤说明
#### 2.1 新建Spring Boot项目
首先，
原创
2023-08-27 07:29:56
84阅读
