文档背景:用公司集群实际搭建过程,用心整理文档.文档目的:让更多的开发者避开坑点快速将集群搭建成功!正文:我们使用 CentOS 7.4 的 3 台服务器。让这些服务器为server1、 server2、server3。我们在每台服务器上 安装PostgreSQL和Pgpool-II 。表 8-2。主机名和 IP 地址表 8-3。PostgreSQL 版本和配置表 8-4。Pgpool-II 版本
转载
2024-06-04 07:43:10
298阅读
冷备如果条件允许的情况下，可以使用传统冷备操作，步骤十分简单，停止数据库后，将需要备份的数据文件、控制文件、日志文件等拷贝一份即可。 热备前提开启归档模式 查询一下用户对应关系，我们用SCOTT测试，所在表空间为USERSoracle 查看用户所在的表空间：select username,default_tablespace from dba_users order by us
备份和恢复为什么要备份 灾难恢复：硬件故障、软件故障、自然灾害、黑客攻击、误操作测试等数据丢失场景备份注意要点 能容忍最多丢失多少数据 恢复数据需要在多长时间内完成 需要恢复哪些数据一定要做还原测试，用于测试备份的可用性， 还原演练备份时需要考虑的因素 温备的持锁多久 备份产生的负载 备份过程的时长 恢复过程的时长备份什么 数据 二进制日志、InnoDB的事务日志 程序代码（存储过程、函数、触发器
转载
2024-04-08 08:29:09
54阅读
前期写的mysql热备份脚本恢复，还没有正式用到过，但是今天演练灾备恢复，但是遇到几个问题。测试环境：搭建mysql，安装xtrabackupvim /etc/yum.repos.d/Percona.repo[percona]
name = CentOS $releasever - Percona
baseurl=http://repo.percona.com/centos/$releasever
通过前面的介绍，相信你对各种高可用和灾难恢复技术已经有一定程度的了解。这些技术都已经被广泛的应用在了全世界的各种企业环境中，为应用持续运行提供保障。高可用和灾难恢复技术的比较每一种技术都有其优点和局限，这些因素决定了它适用于怎么样的环境。要比较各种不同的高可用和灾难恢复技术，就要了解它们的优点和局限。这样才能根据你的需求选择最合适的一款。故障转移群集故障转移群集是SQL Server最早的高可用技
转载
2024-04-18 13:12:01
57阅读
演示pg_rewind的使用方法。主库在10.0.3.101上，备库在10.0.3.102上。这时主库出问题了，如机器宕机了（我们用强制关机来模拟），我们现在激活备库，即在10.0.3.102上执行如下命令：[postgres@pg02 ~]$ pg_ctl promoteserver promot
转载
2021-04-11 13:01:00
717阅读
2评论
1、多节点集群架构设计后续介绍的hadoop多节点集群由三台计算机构成:一台主节点为master，两台从节点为slave1、slave2。master节点上主要运行namenode、Resourcemanager 进程；slave节点上运行datanode、nodemanager进程。 由于大家一般只有一台计算机，因此我们使用虚拟机软件VMware workstat
转载
2023-08-16 19:00:03
241阅读
## 大数据Hadoop集群灾备方案
### 介绍
在当今互联网时代，数据量呈指数级增长，对于大数据的处理成为了一项重要的任务。Hadoop作为一个可靠且可扩展的分布式计算框架，被广泛应用于大数据处理和分析。然而，对于大数据集群而言，灾备方案是一个必不可少的考虑因素。本文将介绍Hadoop集群的灾备方案，并给出相应的代码示例。
### 集群架构
Hadoop集群通常由多个节点组成，包括主节
原创
2023-12-23 08:39:57
176阅读
Hadoop三种运行方式：单节点方式（单台）、单机伪分布方式（一个节点的集群）与完全分布式（多台组成集群）下面以hadoop完全分布式为例，Hadoop 集群的安装配置大致为如下流程:假设需要搭建1 Master，1 Slave1.网络配置2.安装JDK3.创建专门用户hadoop，配置ssh免登录4.Master安装hadoop文件，修改配置文件，拷贝到其他Slave机器上5.启动haoop具体
转载
2023-09-14 14:02:25
94阅读
华为云分布式缓存服务DCS，具有强大的功能，现在小编教大家如何在DCS管理控制台将两个Redis主备实例建立全球灾备。建立全球灾备，会对主实例和备实例进行升级，实例进程会重启，连接会中断。同时备实例会从主实例同步数据，原有的数据会被覆盖，需要谨慎操作。创建了全球灾备后，不同区域的实例可以相互同步数据。当前，该功能只在华北、华东、华南三个区域支持，请以控制台实际情况为准。1 前提条件已经创建了主实例
转载
2024-01-22 20:01:17
54阅读
GBase 8s HAC（容灾高可用）采用基于数据库日志的增量数据同步技术实现节点高可用。根据灾备距离不同分为同城容灾高可用和异地灾备高可用。同城容灾高可用支持一主一从的部署方式，异地灾备高可用支持一主多备的部署方式。HAC主节点执行读写业务的同时，备节点可承担查询、报表等读业务。HAC具有安装简单、应用透明无感知、故障自动切换、无须额外付费等特点。 &nb
转载
2023-11-24 00:48:32
119阅读
北京、广州两套redis集群环境我们的需求是将北京redis集群数据同步广州redis废话不多说 直接上代码 1、导出脚本sync_export_redis30_aof.sh sync_export_redis30_aof.sh#行数
offset=''
#端口号
port=''
#redis安装路径-测试
#install_dir="/opt/web_app/redis-
转载
2023-08-10 15:54:58
220阅读
备份的主要目的是灾难恢复，备份还可以测试应用，回滚数据修改，查询历史数据，审计等。我们将从生产运维的角度了解备份恢复的分类与方法。 在企业中数据的价值至关重要，数据保障了企业业务的运行，因此数据的安全性及可靠性是运维的重中之重，任何数据的丢失都有可能会对企业产生严重的后果。造成数据丢失的原因如下：程序错误人为错误数
转载
2023-12-14 15:10:07
222阅读
“一个系统包含很多模块，数据库、前端、缓存、搜索、消息队列等，每个模块都需要做到高可用，才能保证整个系统的高可用。”数据库作为现代信息社会的基石，几乎所有的计算机应用软件都构建于数据库系统之上，对于数据库而言，高可用的实现可能更为复杂，对用户的服务可用，不仅仅是能仿真，还需要有数据一致性保证。灾备系统成为许多业务应用系统高可用和高可靠性的重要保护措施，基于现代数据库技术的信息灾备系统的建立和发展将
参考链接 Hadoop 完全分布式安装 ZooKeeper 集群的安装部署 0. 说明 在 Hadoop 完全分布式安装 & ZooKeeper 集群的安装部署的基础之上进行 Hadoop 高可用(HA)的自动容灾配置 Hadoop 高可用 High Availabl
转载
2024-04-18 15:02:51
191阅读
在实现K8S集群灾备方案之前，首先需要了解什么是Kubernetes（K8S）。Kubernetes是一个开源的容器编排引擎，可以实现容器集群的自动化部署、扩展和管理。K8S集群灾备方案是为了保证K8S集群的高可用性和数据安全，以应对各种意外情况。
接下来，我们将介绍如何实现K8S集群灾备方案的流程，并给出相关代码示例。
步骤如下：
| 步骤 | 操作
原创
2024-02-22 09:51:13
100阅读
# Kubernetes 集群灾备指南
在当今的云计算环境中，可靠性和可用性是非常重要的。Kubernetes 集群灾备（Disaster Recovery，DR）可以确保在出现故障时，您的应用程序能够快速恢复。本文将引导您完成 Kubernetes 集群灾备的实现，并给出必要的代码示例。
## 实施流程
下表展示了实现 Kubernetes 集群灾备的主要步骤：
| 步骤 | 描述
原创
2024-10-16 03:22:52
68阅读
# 如何实现Java灾备方案
## 灾备方案流程
```mermaid
flowchart TD
A(确定需求) --> B(选择灾备方案)
B --> C(搭建灾备环境)
C --> D(配置灾备策略)
D --> E(测试灾备方案)
```
## 灾备方案步骤
| 步骤 | 操作 |
| ---- | ---- |
| 1 | 确定需求 |
| 2 |
原创
2024-03-09 04:36:36
81阅读
本章我们讨论有关Kafka集群的容错性与高可用性话题在Kafka中，复制的单元是分区，每一个主题中都有一个或者多个分区，每个分区都有一个领导者以及若干个追随者。当创建主题之后，需要指定分区及复制因子，常见的复制因子通常是3，即一个领导者，两个追随者。在Kafka集群中，所有的读写操作都会路由到领导者，追随者只会定期从领导者请求获取最新消息，消费者并不会从追随者分区中获取消息，追随者存在的意义只在于
转载
2024-10-17 12:03:01
94阅读
1、虚拟机准备通过VMware虚拟机克隆功能将hadoop101克隆出hadoop102，hadoop103，hadoop104三台虚拟机并且这3台虚拟机已经完成（关闭防火墙、配置静态IP、配置主机名称、配置主机映射）的操作，接下来准备用这3台克隆的虚拟机搭建集群。上述操作在这篇博客中有详解：Linux学习（六）-Linux学习过程中实用操作（找回root密码&&克隆虚拟机）2、集
转载
2024-10-12 13:12:10
42阅读
