接触一个新的事物的时候，是有必要从其工作原理入手，弄清楚这个东西的来龙去脉，为接下来的继续深入学习做好铺垫，掌握好其原理有助于我们从整体上来把握这个东西，并且帮助我们在排错过程中理清思路。接下来，还是从mysql的工作原理开始入手，下面先来一张经典的图：上面的图就是mysql的内部架构，可以清楚的看到Mysql是由SQL接口，解析器，优化器，缓存，存储引擎组成的。下面是关于上述部件的介绍：conn
```
/tmp/log/shuanggou.clog
``` ```
/tmp/log/shuanggou.log
``` ```
/tmp/log/shuanggou_success.log
``` ```
/tmp/log/shuanggou_error.log
```
原创
2021-08-05 16:09:49
151阅读
接口测试工具Postman什么是Postman写完以后，前端以后不是我们写，就算是我们写也应该先测试好接口，才写前端。所以要先测试，对于get请求可以使用浏览器地址访问，但是其他请求就不行。需要一些接口测试工具postman就是其中的一个，接口来我们就使用它来测试我们的登录接口 下载API路径(https://www.getpostman.com/)使用接口文档Swagger只需要在你的接口的项目
转载
2024-10-11 16:11:16
72阅读
# MySQL写入带时间的数据
## 引言
MySQL是一种常用的关系型数据库管理系统，许多应用程序都需要存储和管理数据。在某些情况下，我们可能需要将数据以时间戳的形式写入数据库中，以便对数据进行时间相关的分析和查询。本文将介绍如何使用MySQL将带有时间戳的数据写入数据库，并提供相应的代码示例。
## 数据库设计
在开始编写代码之前，我们首先需要设计数据库表结构。假设我们的数据库名为`myd
原创
2024-01-22 03:35:50
49阅读
同样还是这张图，之前发过shared_buffer和os cache、wal buffer和work mem的文章，今天的主题是图中的clog，即 commit log，PostgreSQL10之前放在数据库目录的pg_clog下面。PostgreSQL10之后修更名为xact,数据目录变更为pg_xact下面，表现形式是一些物理文件。PostgreSQL为什么要使用clog呢，众所周知，Post
原创
2023-10-17 16:27:50
4阅读
一直没理解为什么当数据量达到一定程度时，mysql 会很慢，mongodb 会更快．以至于我到现在还没理解什么时候用 mongodb，什么时候用 mysql，不清楚两者的优势(底层原理优势).从开发速度来讲，mysql 现在支持 json 字段，在一定角度来看一个表有了 json 字段就跟 mongodb 文档结构开发起来差不多方便了．从底层原理看:mysql innodb 使用 b+tree,
转载
2023-06-10 21:24:57
81阅读
数据库的CLOG是指"Commit Log"，即提交日志。它是数据库系统中的一种重要组件，用于记录事务的提交信息和相关日志。在数据库系统中，事务是由一系列的操作组成的逻辑单元。当一个事务提交时，数据库需要确保该事务的所有更改已经持久化到磁盘上，以保证数据的一致性和持久性。为了实现这一目标，数据库通过CLOG来记录事务的提交操作。CLOG通常记录以下内容：事务的唯一标识符（Transaction I
原创
2023-10-07 00:03:26
299阅读
「干货」图解 Elasticsearch 写入流程【图文】_zhenghhgz_51CTO博客请访问原文 整体上看，Client 向 ES 发送写请求，es 接收数据，写入磁盘文件，返回响应给 Client 写入成功，这样就完成了。然后拉近看一下，看看内部都做了什么工作。2. ES 整体结构 ES 集群里面有多个 Server 节点，一个 ES Index 有多个 shar
转载
2023-11-17 17:17:57
58阅读
es写入数据的工作原理是什么啊？es查询数据的工作原理是什么？底层的lucence介绍一下呗？倒排索引了解吗？一、ES写数据过程客户端选择一个node发送请求过去，这个node就是coordinating node(协调节点）coordinating node对document进行路由，将请求转发给对应的node（有primary shard）实际的node上的primary shard处理请求，
转载
2023-12-26 11:01:50
54阅读
一般来说，使用ES都是将其作为分布式搜索系统或者是分布式NoSQL数据库。从这两个角度分别来说一下 ES 的写操作。写操作在分析一个分布式系统的写操作时，一般要考虑以下几个点：可靠性：也就是持久性，数据成功写入系统后，数据不会丢失。一致性：数据写入成功后，再次查询确保读到的是新数据，不能读到旧数据。原子性：一个写入操作或者更新操作要么全部成功，要么完全失败， 没有中间状态。隔离性：多个写入操作不影
转载
2023-08-26 19:44:11
124阅读
# ES写入为什么比mysql快
在现代的应用开发中，数据存储和检索是至关重要的环节。传统的关系型数据库MySQL在数据存储方面一直是广泛应用的选择，但随着云计算和大数据时代的到来，一些新兴的数据库技术也逐渐受到关注，其中Elasticsearch（以下简称ES）作为一款全文检索引擎，被越来越多的开发者采用。那么为什么ES写入会比MySQL快呢？下面我们将通过对ES和MySQL写入机制的比较来解
原创
2024-07-13 05:22:40
239阅读
MySQL 自身简单、高效、可靠，是又拍云内部使用最广泛的数据库。但是当数据量达到一定程度的时候，对整个 MySQL 的操作会变得非常迟缓。而公司内部 robin/logs 表的数据量已经达到 800w，后续又有全文检索的需求。这个需求直接在 MySQL 上实施是难以做到的。原数据库的同步问题由于传统的 mysql 数据库并不擅长海量数据的检索，当数据量到达一定规模时（估算单表两千万左右），查询和
转载
2023-07-28 23:19:32
93阅读
xact就是事务，只不过有些地方用xact，有些地方用trans，有些用transac
原创
2022-12-10 15:25:12
189阅读
# MongoDB写入和MySQL写入性能比较
在当今的数据库领域，MongoDB和MySQL是两种非常流行的数据库系统。它们在数据存储和处理方面各有优势。本文将通过代码示例和流程图，对MongoDB和MySQL的写入性能进行比较。
## 流程图
首先，我们来看一下MongoDB和MySQL写入操作的流程：
```mermaid
flowchart TD
A[开始] --> B[选
原创
2024-07-21 04:16:32
50阅读
# MySQL 数据库中的时间差问题
## 引言
在使用 MySQL 数据库时，我们有时会遇到一些时间相关的问题。其中之一就是数据表中的时间与我们写入的时间不一致的问题。比如，我们发现表中的数据比我们实际写入的时间少了8小时。这个问题可能会导致一些数据分析和统计的错误，因此需要及时解决。本文将介绍这个问题的原因和解决方法，并提供相应的代码示例。
## 问题原因
在 MySQL 中，存储日期
原创
2024-01-08 09:41:38
228阅读
写入Excel和写入MySQL是开发中常见的操作，本文将介绍写入Excel和写入MySQL的流程、代码示例以及相关的注意事项。
## 一、写入Excel的流程
下面是写入Excel的基本流程：
```mermaid
sequenceDiagram
participant 开发者
participant 小白
开发者->>小白: 确定写入Excel的数据和目标位置
原创
2023-09-13 23:04:10
88阅读
# iOS 数据写入文件的完整指南
在iOS开发中，处理数据文件的读写是一个常见的任务。本文将给你介绍如何在iOS中写数据到文件，适合刚入行的小白。我们会从整个流程开始，逐步解构每个步骤，并提供代码示例和详细注释。
## 整体流程
我们可以将“ios data写入文件”的过程分为以下几个步骤，以下是一个简单的流程表：
| 步骤 | 操作描述 |
|-
# 如何解决“mysql LONGTEXT写入中文 Data too long for column”
## 介绍
作为一名经验丰富的开发者，我将指导你如何解决“mysql LONGTEXT写入中文 Data too long for column”这个问题。在这篇文章中，我将向你展示整个解决问题的流程，并指导你如何逐步解决这个问题。
## 解决流程
以下是解决这个问题的步骤表格：
| 步
原创
2024-02-28 03:28:32
736阅读
同比与环比有何不同？ 文章目录同比与环比有何不同？一、同比基本概念二、环比基本概念三、同比和环比的应用 增长速度是反映经济社会某一领域发展变化情况的重要数据，而同比和环比是反映增长速度最基础、最核心的数据指标，也是国际上通用的指标。在统计中， 同比和环比通常是同比变化率和环比变化率的简称，用于表示某一事物在对比期内发展变化的方向和程度。 一、同比基本概念同比是以上年同期为基期相比较，即本期某一时
转载
2023-08-22 18:48:23
124阅读
# 实现mysql和es的写入性能
## 整体流程
首先，我们需要将数据存储到MySQL数据库中，然后再将数据同步到Elasticsearch（ES）中，以提高检索性能。下面是整个流程的步骤：
| 步骤 | 描述 |
| ---- | ---- |
| 1 | 数据写入MySQL数据库 |
| 2 | 数据同步到Elasticsearch |
## 具体操作步骤
### 步骤1：数据写入
原创
2024-04-17 04:55:19
46阅读
