一、背景公司基于业务发展以及战略部署，需要实现在多个数据中心单元化部署，一方面可以实现多数据中心容灾，另外可以提升用户请求访问速度。需要保证多数据中心容灾或者实现用户就近访问的话，需要各个数据中心拥有一致的全量数据，如果真正实现用户就近读写，也就是实现真正的业务异地多活，数据同步是异地多活的基础，这就需要多数据中心间数据能够双向同步。二、原生redis遇到的问题1、不支持双主同步原生redis并没
转载
2024-02-10 21:30:09
96阅读
目录一、多机房部署的难点是什么1.直接跨机房读取从库：2.在机房B部署一个从库，跨机房同步主库的数据，然后机房B的应用就可以读取这个从库的数据 二、逐步迭代多机房部署方案1.同城双活2.异地多活一、多机房部署的难点是什么多机房部署的含义是： 在不同的IDC机房中部署多套服务，这些服务共享同一份业务数据，并且都可以承接来自用户的流量这种架构听起来非常美好，但是在实现上却是非常复杂和困难的假
转载
2023-12-21 11:19:00
159阅读
测试使用vitess的时候发现vitess元数据的实现有多种方案，etcd, etcd2, zk,zk2, 由于刚开始测试的时候使用的是基于k8s集群+etcd的，以下就分步说明灾备实现方案：1. 前置条件 元数据实现方式必须选择etcd2, 即在启动的时候需要增加参数 -topo_implementation etcd2 #元数据实现方案， 此处一定需要选择etcd
转载
2024-06-04 10:16:19
159阅读
多机房部署：跨地域的分布式系统如何做？多机房部署的难点是什么？逐步迭代多机房部署方案同城双活异地多活总结 多机房部署的难点是什么？多机房部署的含义是：在不同的 IDC 机房中，部署多套服务，这些服务共享同一份业务数据，并且都可以承接来自用户的流量。这样，当其中某一个机房出现网络故障、火灾，甚至整个城市发生地震、洪水等大的不可抗的灾难时，你可以随时将用户的流量切换到其它地域的机房中，从而保证系统可
转载
2023-11-09 11:42:54
85阅读
在分布式架构中，服务治理是一个重要的问题。在没有服务治理的分布式集群中，各个服务之间通过手工或者配置的方式进行服务关系管理，遇到服务关系变化或者增加服务的时候，人肉配置极其麻烦且容易出错。之前在一个C/C++项目中，采用ZooKeeper进行服务治理，可以很好的维护服务之间的关系，但是使用起来较为麻烦。现在越来越多新的项目采用consul进行服务治理，各方面的评价都优于ZooKeeper，经过几天
转载
2024-08-15 08:55:03
105阅读
# RedisCluster跨集群同步
在分布式系统中，数据同步是一个重要的话题。当我们使用Redis集群作为数据库时，数据的同步就变得尤为重要。RedisCluster跨集群同步就是一种解决数据同步问题的方式。
## 什么是RedisCluster
RedisCluster是Redis的分布式解决方案，它可以将数据分布在多个节点上，实现数据的高可用和负载均衡。RedisCluster采用分
原创
2023-10-12 05:23:08
205阅读
1、复制通过执行slaveof让一个服务器去复制另一个服务器。1.1、旧版复制功能的实现分为同步和命令传播两个操作：同步操作将从服务器数据库状态更新至主服务器当前所处的数据库状态；命令传播操作则用于在主服务器的状态被修改时导致主从服务器的状态出现不一致时，让主从服务器数据库重新回到一致状态。同步步骤从服务器向主服务器发送SYNC命令；收到SYNC命令的主服务器执行BGSAVE，在后台生成一个RDB
转载
2024-02-04 01:15:28
80阅读
1.由多个Redis服务器组成的分布式网络服务集群；每一个Redis服务器称为节点Node，节点之间会互相通信。两两相连；Redis集群无中心节点。 当用户需要处理更多读请求的时候，添加从节点可以扩展系统的读性能，因为Redis集群重用了单机Redis复制特性的代码，所以集群的复制行为和我们之前介绍的单机复制特性的行为是完全一样的。 2.故障转移&nbs
转载
2023-08-11 19:34:43
217阅读
随着云计算十余年的高速发展，作为目前可见的最新阶段，多云正在快步大踏步前进。而多云趋势所带来得数据云间迁移，也逐步常态化。因此，缓存 Redis 已成为高并发场景下提升数据访问速度的标配。不仅是数据云间迁移，目前大型系统对于缓存强依赖，致使大多数企业都会面临大量并发读写数据时访问速度慢、数据库压力大，以及缓存数据不⾜带来的缓存击穿及雪崩⻛险。其中，Redis 就起到了降低数据库压力，提升数据访问速
转载
2023-08-11 16:17:54
266阅读
Rotter 是禧云自主研发的跨机房Redis双向同步解决方案（下文简称为方案），具有零侵入、高吞吐量、低延时、高堆积能力等特点。当前版本支持Sentinel模式和单点模式Redis架构。
作者杨海波 一、项目介绍Rotter是禧云自主研发的跨机房Redis双向同步解决方案（下文简称为方案），具有零侵入、高吞吐量、低延时、高堆积能力等特点。当前
转载
2023-07-08 22:19:05
303阅读
代码的世界只是现实世界的一个延伸，总是充斥着各种各样的bug，这两天，就发生了一个串号的事故，搞得焦头烂额。程序员，特别是架构师，在设计系统的时候，系统的可用性非常的重要，也就是说，容灾，是必须的！ Redis，作为一个常用的缓存，很多人忽略了系统的容灾，试想，如果有一天晚上，突然部署Redis的机器烧坏了，总不能半夜三更把运维人员叫起来，然后重新部署一台机器，开始修改各个机器的Red
转载
2023-07-05 23:52:20
141阅读
关键词：Rotter，Redis，多活，跨机房，同步一、项目介绍Rotter 是禧云自主研发的跨机房Redis双向同步解决方案(下文简称为方案)，具有零侵入、高吞吐量、低延时、高堆积能力等特点。当前版本支持Sentinel模式和单点模式Redis架构。从2019年Q2上线至今，服务于三个独立业务线，线上运行稳定，同步延时基本在50ms以内。1.1 系统架构整个Redis跨机房双向同步系统
转载
2023-07-07 15:59:15
978阅读
1评论
本文以Redis-Cluster为例子，实际使用中Redis-Sentinel和Redis Standalone也是一样的。 一、现有问题由于Redis本身的一些特性(例如复制)以及使用场景，造成Redis不太适合部署在不同的机房，所以通常来看Redis集群都是在同一个机房部署的。虽然Redis集群自身已经具备了高可用的特性，即使几个Redis节
转载
2024-01-30 21:41:14
99阅读
测试使用vitess的时候发现vitess元数据的实现有多种方案，etcd, etcd2, zk,zk2, 由于刚开始测试的时候使用的是基于k8s集群+etcd的，以下就分步说明灾备实现方案：1. 前置条件 元数据实现方式必须选择etcd2, 即在启动的时候需要增加参数 -topo_implementation etcd2 #元数据实现方案， 此处一定需要选择etcd2，
转载
2024-09-01 23:02:14
117阅读
本文以Redis-Cluster为例子，实际使用中Redis-Sentinel和Redis Standalone也是一样的。一、现有问题 由于Redis本身的一些特性(例如复制)以及使用场景，造成Redis不太适合部署在不同的机房，所以通常来看Redis集群都是在同一个机房部署的。虽然Redis集群自身已经具备了高可用的特性，即使几个Redis节点异常或者挂掉，Redis Cluster也会实现故
转载
2023-10-25 12:44:09
283阅读
docker swarm redis集群机器配置创建目录创建网络编写compose.yml模版文件启动服务测试验证集群集群测试验证异常no suitable node (scheduling constraints not satisfied on 3 nodes)"4.11.2.Error response from daemon: rpc error: code = Unknown desc
转载
2023-06-15 14:04:35
362阅读
Ceph是一个开源的分布式存储系统，可以提供高性能、高可用性和可扩展性的存储服务。在现代的云计算环境中，跨机房的数据存储和备份变得越来越重要。在这种情况下，Ceph跨机房功能成为了一个非常关键的话题。
Ceph跨机房功能是指在多个机房之间进行数据同步和备份，以确保即使出现一些不可预见的情况，比如机房断电或网络故障，也可以保证数据的安全和高可用性。通过使用Ceph跨机房功能，用户可以在不同的地理位
原创
2024-02-27 11:25:16
117阅读
想象这样一个应用场景，公司有两个机房。因为一个紧急需求，需要跨机房读取 Redis 数据。应用部署在 A 机房，存储部署在 B 机房。如果使用普通 tcp 直接访问，因为跨机房所以传输数据会暴露在公网，这非常不安全，客户端服务器交互的数据存在被窃听的风险。Redis 本身并不支持 SSL 安全链接，不过有了 SSL 代理软件，我们可以让通信数据透明地得到加密，就好像 Redis 穿上了一
转载
2023-08-08 11:11:40
234阅读
Master/Slave方案这是最常用的方案，适用于大多数需求。Master将操作日志实时地发送到Slave，Slave当成Master的一
转载
2023-01-11 18:55:05
114阅读
# 实现HBase跨机房教程
## 摘要
本文将指导你如何实现HBase跨机房。首先，我们将介绍整个流程，并使用表格展示每个步骤。然后，我们将详细说明每个步骤需要做什么，并提供需要使用的代码和代码注释。
## 1. 整体流程
下表展示了实现HBase跨机房的整体流程。
| 步骤 | 描述 |
| --- | --- |
| 步骤1 | 搭建多数据中心环境 |
| 步骤2 | 配置HBase
原创
2023-10-28 11:58:40
64阅读
