一、dmctl相关tiup dmctl --helpUsage: dmctl [global options] command [command options] [arguments...]
Available Commands:
check-task check-task <config-file> # 检查任务的配置文件
get-config ge
转载
2024-04-03 13:12:52
116阅读
作者：吴永健 社会数字化、智能化的发展进程中，海量的数据带来巨大挑战，各行各业都在加速数字化转型，越来越多的企业意识到数据基础设施是成功的...
转载
2022-08-12 22:35:20
348阅读
# TiDB MySQL DM 同步指南
随着数据量的不断增长及对数据管理效率的追求，数据库同步成为了现代数据管理的重要环节。本文将为您详细介绍如何使用 TiDB MySQL DM （Data Migration）工具进行数据同步。从基础的准备工作到代码执行，您将能够清晰地理解整个流程。
## 一、整件事情的流程
同步流程可以分为以下几个步骤，我们将以表格的形式展示：
| 步骤 |
原创
2024-08-30 06:39:23
93阅读
一、dm部署（步骤1，2，3可以从这篇文章上看）1.安装tiup2.创建tidb用户3.配置免密4.安装dmtiup install dm5.tiup及dm组件更新tiup update --self && tiup update dm6.安装tiup dm deploy dm-test v2.0.3 topology.yaml --user tidb [-p] [-i /home
转载
2023-07-12 21:33:53
79阅读
目标主机软硬件配置建议如下：建议 4 台及以上，TiKV 至少 3 实例，且与 TiDB、PD 模块不位于同一主机目前 TiUP 仅支持在 x86_64 (AMD64) 架构上部署 TiDB 集群（TiUP 将在 4.0 GA 时支持在 ARM 架构上部署）在 AMD64 架构下，建议使用 CentOS 7.3 及以上版本 Linux 操作系统在 ARM 架构下，建议使用 CentOS 7.6 1
转载
2024-01-08 17:23:40
96阅读
作者确定了写入热点问题的处理方式，搞好了监控，就要准备接入生产服的写入流量进入tidb集群了。这就轮到了...
原创
2023-07-10 06:53:01
166阅读
TiDB DM扩容和监控 简介 • TiDB Data Migration (DM) 是一体化的数据迁移任务管理平台，支持从 MySQL 或 MariaDB 到 TiDB 的全...
转载
2022-08-13 08:03:38
178阅读
简介快照备份是集群全量备份的一种实现。它基于 TiDB 的多版本并发控制 (MVCC) 实现，将指定快照包含的所有数据备份到目标存储中。备份下来的数据大小约等于集群（压缩后的）单副本数据大小。备份完成之后，你可以在一个空集群或不存在数据冲突（相同 schema 或 table）的集群执行快照备份恢复，将集群恢复到快照备份时的数据状态，同时恢复功能会依据集群副本设置恢复出多副本。TiDB
转载
2024-02-19 07:05:32
82阅读
作者：gloria_cy 1、前言 一天开发突然找我，有没有办法可以同时查询4个库数据，业务提了需求需要一周上线，我们业务驱动型公司业务提的需要想办法...
转载
2022-08-12 22:44:12
259阅读
作者： paulli 一、DM原理和使用场景 DM原理DM 提供了 Table routing、Block & Allow Table Lists、Binlog event filter 等基本功能，适用于不同的迁移场景。在迁移之前，建议先了解下这些基本功能，根据需求进行选择和配置。 Table routingTable routing 可以将上游 MySQL/MariaDB 实
原创
2024-03-30 13:59:06
70阅读
作者： paulli 一、DM原理和使用场景 DM原理DM 提供了 Table routing、
一、背景在早期从MySQL到TiDB实施同步操作过程中，我们大多数用的是mydumper+loader进行整体全量备份的导出，之后拿到meta信息后，通过syncer实现增量同步，整体操作起来比较麻烦，涉及的配置文件较多，其基本原理就是Syncer通过把自己注册为一个MySQLSlave的方式，和MySQLMaster进行通信，然后不断读取MySQLBinlog，进行BinlogEvent解析，规
推荐
原创
2020-11-11 09:25:35
10000+阅读
点赞
2评论
背景TiDB 的一键水平伸缩特性，帮助用户告别了分库分表查询和运维带来的复杂度，但是在从分库分表方案切换到 TiDB 的过程中，这个复杂度转移到了数据迁移流程里。TiDB DM 工具为用户提供了分库分表合并迁移功能。本篇文章将介绍 DM 核心处理单元 Sync，内容包含 binlog 读取、过滤、路由、转换，优化以及执行等逻辑。本文仅描述 DML 的处理逻辑，DDL 相关内容可参考《DM 分库分表
转载
2024-09-01 16:29:57
127阅读
作者： db_user 一、背景 dm同步任务报警DM_sync_process_exists_with_error，一分钟后自动恢复，想着排查一下原因 二、观测日志报错 1.dm日志 [2...
原创
2022-08-12 11:25:34
220阅读
作者：stutiredboy 前段时间，看到了一篇关于数据库选型的文章（MongoDB/TiDB/CockroachDB），忍不住感慨了一句，TiDB 一看就是大户人家，什么工具...
转载
2022-08-13 00:38:06
382阅读
天兔（Lepus 3.8）数据库监控系统部署 一、安装LAMP基础环境首先向大家阐述LAMP(Linux+Apache+MySQL +PHP)基础环境配置。配置LAMP基础环境的方式有很多种，最简单的方式有yum安装、RPM包安装等方式、安装集成环境包(例如lampp/xampp等)。您也可以手动编译安装相关软件。这里我们不推荐使用YUM进行安装，YUM安装的PHP环境可以因为缺少某些依赖包导致5
一、DM部署简介 DM-Ansible和Binary都可以部署 TIUP部署的方式更加便捷 和ansible方式都需要联网。 TIDB version: TiDB-v4.0.3 MY...
转载
2022-08-13 08:14:06
136阅读
作者：边城元元 体验DM-WebUI 一、背景 DM 是一款便捷的数据迁移工具，支持从与 MySQL 协议兼容的数据库到 TiDB 的全量数据迁移和增量数据同步。 ...
转载
2022-08-12 22:23:34
209阅读
