1、虚拟机准备通过VMware虚拟机克隆功能将hadoop101克隆出hadoop102，hadoop103，hadoop104三台虚拟机并且这3台虚拟机已经完成（关闭防火墙、配置静态IP、配置主机名称、配置主机映射）的操作，接下来准备用这3台克隆的虚拟机搭建集群。上述操作在这篇博客中有详解：Linux学习（六）-Linux学习过程中实用操作（找回root密码&&克隆虚拟机）2、集
转载
2024-10-12 13:12:10
42阅读
利用HDFS实现ElasticSearch7.2容灾方案目录利用HDFS实现ElasticSearch7.2容灾方案前言快照版本兼容备份集群HDFS文件系统软件下载JDK环境配置系统环境变量hadoop配置配置JAVA_HOME配置核心组件文件配置文件系统配置mapred配置 yarn-site.xml格式化文件系统启动hdfs访问ES插件安装插件下载插件安装创建仓库创建快照恢复快照备份恢复时间案
转载
2023-10-17 20:10:31
156阅读
异地备份工具Amazon Web Services’ S3 storage solution is useful for many things, and serves as the CDN for many major websites. But despite the portfolio of high-profile use cases for the service, it’s still
转载
2024-06-15 17:28:39
64阅读
# Kubernetes 集群灾备指南
在当今的云计算环境中，可靠性和可用性是非常重要的。Kubernetes 集群灾备（Disaster Recovery，DR）可以确保在出现故障时，您的应用程序能够快速恢复。本文将引导您完成 Kubernetes 集群灾备的实现，并给出必要的代码示例。
## 实施流程
下表展示了实现 Kubernetes 集群灾备的主要步骤：
| 步骤 | 描述
原创
2024-10-16 03:22:52
68阅读
Redis sentinel(哨兵)模块已经被集成在redis2.4+的版本中,尽管目前不是release,不过可以尝试去使用和了解,事实上sentinel还是有点复杂的. sentinel主要功能就是为Redis M-S(master,slaves)集群提供了1)master存活检测 2)集群中M-S服务监控 3) 自动故障转移,M-S角色转换等能力,从一个方
转载
2024-09-29 10:24:13
50阅读
TFS集群支持异地机房容灾，一个逻辑集群包含分布在多个机房的物理集群，其中一个是主集群，其他的是备份集群。客户端写文件时，都会写到主集群，主集群的Dataserver(DS)异步将数据同步到多个备集群；客户端在读取数据时，会选择离自己最近的物理集群读取数据，如果读不到数据，就重试逻辑集群里的其他物理集群。对集群同步的期望1. 所有的文件都能被同步到备集群
2. 文件尽快同步到备集群
3. 文件
转载
2024-04-29 10:00:10
113阅读
数据备份数据备份是容灾的基础，是指为防止系统出现操作失误或系统故障导致数据丢失，而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。重要性由于对数据的威胁通常比较难于防范，毁坏数据的同时也会毁坏访问数据的系统。原因主要有平台故障，系统设计漏洞或者设计者本身预置的“黑洞”，硬件故障，人为失误，非法者的恶意破坏，系统供电故障等计算机里面重要的数据、档案或历史纪录，不论是对企业用户还
转载
2024-07-02 21:52:55
9阅读
文档背景:用公司集群实际搭建过程,用心整理文档.文档目的:让更多的开发者避开坑点快速将集群搭建成功!正文:我们使用 CentOS 7.4 的 3 台服务器。让这些服务器为server1、 server2、server3。我们在每台服务器上 安装PostgreSQL和Pgpool-II 。表 8-2。主机名和 IP 地址表 8-3。PostgreSQL 版本和配置表 8-4。Pgpool-II 版本
转载
2024-06-04 07:43:10
301阅读
集群组成任意台ZooKeeper服务器都能部署且能够正常运行。 其实关于ZooKeeper集群服务器数，ZooKeeper官方确实给出了关于奇数的建议，但绝大部分ZooKeeper用户对这个建议认识有偏差。基于“过半存活即可用”这个特性，如果想搭建一个能够允许F台及其down掉的集群，那么就要部署一个由2*F+1台
1、多节点集群架构设计后续介绍的hadoop多节点集群由三台计算机构成:一台主节点为master，两台从节点为slave1、slave2。master节点上主要运行namenode、Resourcemanager 进程；slave节点上运行datanode、nodemanager进程。 由于大家一般只有一台计算机，因此我们使用虚拟机软件VMware workstat
转载
2023-08-16 19:00:03
247阅读
etcd 是 kubernetes 集群极为重要的一块服务，存储了kubernetes集群所有的数据信息，如 Namespace、Pod、Service、路由等状态信息。如果 etcd 集群发生灾难或者 etcd 集群数据丢失，都会影响k8s集群数据的恢复。因此，通过备份 etcd 数据来实现kubernetes 集群的灾备环境十分重要。一、etcd集群备份etcd 不同版本的 etcdctl 命
原创
2023-09-12 14:08:58
374阅读
EMC云备份一、主要组成1、Data Domain 针对备份和归档的保护存储。2、EMC Avamar 重复数据消除备份软件和系统。3、EMC NetWorker 统一备份和恢复。4、EMC Data Protection Advisor 统一数据保护管理。二、EMC Data DomainEMC Data Domain针对备份和归档的保护存储。利用高速重复数据消除整合备份、归档和灾难恢复。EMC
转载
2024-03-19 17:16:13
37阅读
参考链接 Hadoop 完全分布式安装 ZooKeeper 集群的安装部署 0. 说明 在 Hadoop 完全分布式安装 & ZooKeeper 集群的安装部署的基础之上进行 Hadoop 高可用(HA)的自动容灾配置 Hadoop 高可用 High Availabl
转载
2024-04-18 15:02:51
191阅读
RAC (oracle应用集群) 互相备份DATAGARD (灾备) 数据冗余-----------------Data Guard三种保护模式Oracle Data Guard为我们提供了非常人性化的三种保护模式，其目的应用于不同的保护级别和场合，存在的目的就是让我们的数据库，健健康康活着，创造出自己的价值1）保护最大化：主库与备库实时同步数据，如果主库挂
原创
2016-01-22 12:58:26
1352阅读
通过前面的介绍，相信你对各种高可用和灾难恢复技术已经有一定程度的了解。这些技术都已经被广泛的应用在了全世界的各种企业环境中，为应用持续运行提供保障。高可用和灾难恢复技术的比较每一种技术都有其优点和局限，这些因素决定了它适用于怎么样的环境。要比较各种不同的高可用和灾难恢复技术，就要了解它们的优点和局限。这样才能根据你的需求选择最合适的一款。故障转移群集故障转移群集是SQL Server最早的高可用技
转载
2024-04-18 13:12:01
57阅读
许多企事业单位虽然已经认识到信息安全的重要性，却迟迟没有行动。其中的原因是多方面的，最主要的一个原因就是在如何建立容灾系统的问题上存在种种疑惑。容灾设计指标主要与容灾系统的数据恢复能力有关，最常见的设计指标有RTO 和RPO。RPO是指能把数据恢复到过去的那一个时间点，RTO 是指在出现问题后“什么时候”可以恢复数据。
RPO可简单地描述为企业能容忍的最大数据丢失量。为了更好地理解，可以想一
转载
2024-03-12 14:34:35
90阅读
由于项目的服务器分布在重庆，上海，台北，休斯顿，所以需要做异地容灾需求。当前的mysql，redis cluster，elastic search都在重庆的如果重庆停电了，整个应用都不能用了。现在考虑第一步做重庆和上海的异地容灾，大概测试了一下重庆的几台服务器之间大概是13m/s的传输速度也就是说100M的局域网带宽，重庆到上海只有1.2m/s的传输速度，大概10M的局域网带宽。第一个方案先考虑简
转载
2023-07-23 20:21:57
274阅读
目录一、灾备的定义1.1 什么是灾备？1.2 备份和容灾的概念1.2.1 备份1.2.2 容灾1.2.3 两者区别1.2.4 两者关系1.3 灾备提供的保护二、灾备的作用2.1 存在的问题2.1.1 数据中心存在的问题2.1.2 没有灾备会怎么样？2.2 备份的作用2.2.1 存储层面2.2.2 云计算层面2.2.3 复制类型2.3 容灾的作用2.3.1 容灾的应用场景2.3.2 容灾解决方案全景
转载
2023-12-18 23:38:52
35阅读
在介绍DM主备集群之前先简单介绍下相关的概念：一、DM主备集群概念（DMDataWatch)1.1、DM主备集群概念：（Oracle：dataguard；MySQL：主备）DM数据守护（Data Watch）是一种集成化的高可用、高性能数据库解决方案，是数据库异地容灾的首选方案。 DM数据守护提供多种解决方案，可以配置成实时主备、读写分离集群DMRWC、MPP主备，能满足用户关于系统可用性、数据安
转载
2024-05-05 08:04:24
49阅读
各个大型企业都有必要建立异地的灾难备份系统，同时需要重点考虑建设成本，寻求一种用的着，用的起的灾备系统建设模式。根据目前灾备行业发展现状，可以选择以下几种方式建设灾备系统：(1)自建灾备中心模式① 一次性投资巨大IT系统投入、通信网络设备投入，这笔投入是为小概率的事件准备的，平时都处于闲置状态，导致总体投入成本(TCO)和投资回报率(ROI)不对称，灾备中心资源利用率低，也不能对经纪
转载
2023-12-18 22:36:59
20阅读
