1、源码包准备： 首先到官网下载jdk1.8到主目录 或在一下地址下载 64位下载地址：http://hadoop.
# Hadoop双活：构建高可用的大数据平台
随着大数据技术的迅速发展，Hadoop作为一个开源的分布式存储和计算平台，在企业中得到了广泛应用。然而，一台Hadoop集群的单点故障可能会导致整个平台的不可用，因此构建高可用的Hadoop平台变得至关重要。本文将介绍Hadoop双活的概念以及如何实现高可用的Hadoop集群。
## 什么是Hadoop双活？
Hadoop双活是指在两个或多个地理
原创
2024-04-10 03:36:16
91阅读
其实双活这个字眼并不属于容灾范畴，容灾向来是以RPO/RTO来定义其级别，所谓的双活只是业内对某种较高容灾级别的架构的俗称，根据不同的角度对其理解也有所偏差。那么基于此，本人暂且认为只要是两个数据中心同时能提供业务服务的就认为是所谓的双活。在这个前提条件下，从Oracle数据库本身的技术来讲，有这么几种方案。基于跨中心实现的远距离RAC架构。1)基于ASM冗余设计实现。2)基于存储集群化之后的分布
转载
2024-01-26 08:46:42
139阅读
我们将面对架构的高性能、高可用、安全性，其中数据服务器岩机或数据丢失、数据读取压力等情况作为架构师需要考虑。故此有了主备mysql的架构，实现了架构的高性能、高可用、安全性 &n
转载
2024-05-06 19:40:42
56阅读
在linux服务器lvs负载均衡、双机热备应用中经常用到mysql双机热备，安装和配置过程如下： 一、 安装MYSQL # cp mysql-standard-4.1.9-pc-linux-gnu-i686.tar.gz /usr/local/
# tar zxvf mysql-standard-4.1.9-pc-linux-gnu-i686.tar.gz
# mv mysql-stan
转载
2024-05-22 16:48:45
44阅读
↑构建高可用LVS + keepalived+httpd和双主模型的keepalived方案↑标签：web服务器 拓扑图 模型 检测 软件原创作品，允许转载，转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://gyulong.blog.51cto.com/6844383/1302368keepalived简介keepalived是一个类似于layer3
文章目录1. Nginx基础概述2. Nginx安装启动3. Nginx配置文件4. Nginx搭建一个静态资源web服务器5. Nginx虚拟主机5.1 多网卡多IP的方式5.2 基于端口的配置方式5.3 基于多个hosts名称方式(多域名方式)6. Nginx日志管理7. Nginx日志切割8. 自我总结 1. Nginx基础概述（1） Nginx是一个开源（直接获取源代码） 且 高性能（支
文章目录1. Nginx基础概述2. Nginx安装启动3. Nginx配置文件4. Nginx搭建一个静态资源web服务器5. Nginx虚拟主机5.1 多网卡多IP的方式5.2 基于端口的配置方式5.3 基于多个hosts名称方式(多域名方式)6. Nginx日志管理7. Nginx日志切割8. 自我总结 1. Nginx基础概述（1） Nginx是一个开源（直接获取源代码） 且 高性能（支
参考大佬文章：后台开发必备知识——容灾1.容灾：容灾就是对灾难（disater）的容忍能力，即当灾难袭来时，能保证服务正常运行而采取的措施，以实现业务连续性为目标。后台服务要保证业务连续性（服务不中断，或中断时间在允许范围内），系统需具备容灾能力。基于服务冗余实现的，大而全的容灾系统具有较大成本。2.容灾层级划分：1.数据级容灾：数据备份 2.应用级容灾：数据备份 + 服务多实
转载
2024-01-30 04:06:25
213阅读
1 需求概述2 技术方案2.1 双活同步条件2.1.1 自增主键2.1.2 同步用户2.1.3 启用BinLog2.2 配置复制任务2.2.1 单向复制任务2.2.2 反向复制任务2.3 启动复制任务1 需求概述多地业务系统直接读写某地A的MySQL中心数据库数据，中心数据库数据实时同步到异地B的备份中心。当某地业务系统访问A地中心数据库失败时，则切换到B地备份数据库读写数据。对于B地备份中心产生
转载
2023-08-14 22:48:14
148阅读
在网络架构设计中，双活网关配置是一项非常重要的任务之一。而在华为设备中，VXLAN双活网关配置则是其中的一个关键步骤。VXLAN（Virtual Extensible LAN）是一种用于扩展L2网络的技术，允许在现有L3网络上构建逻辑上扁平的L2网络。在实际操作中，VXLAN双活网关配置能够提高网络的冗余性和可靠性，保障网络的高可用性。
在进行VXLAN双活网关配置之前，首先需要了解VXLAN的
原创
2024-03-05 10:18:31
220阅读
## 异地双活Redis配置
### 1. 引言
随着云计算和大数据技术的快速发展，异地多活成为了许多企业和服务提供商的需求。在传统的架构中，通常使用主备模式来实现高可用性，但是随着业务的扩展和用户量的增加，传统的主备架构越来越难以满足需求。而异地双活技术可以将数据分布在不同的地域，实现更高的可用性和更好的性能。
本文将介绍异地双活Redis的基本概念、配置方法和代码示例，并结合甘特图和饼状
原创
2024-01-15 09:48:15
102阅读
Redis是一种开源的高性能键值存储数据库，常用于缓存、消息队列等场景。在分布式系统中，为了保证高可用性和数据的一致性，常常需要配置Redis的异地双活（Active-Active）模式。本文将介绍Redis异地双活的配置方法，并提供相应的代码示例。
## 一、什么是Redis异地双活
Redis异地双活是指在多地部署Redis实例，同时允许读写操作，并保持数据的一致性。通常情况下，Redis
原创
2023-08-20 03:25:53
440阅读
虚拟主机，反向代理，负载均衡基本配置1. 虚拟主机基本设置#server大括号里的都是虚拟主机相关定义
server {
#监听端口
listen 80;
#访问域名，域名可以有多个，用空格隔开
server_name localhost;
#编码格式，若网页格式与此不同，将被自动转码
转载
2024-10-19 20:44:02
149阅读
Mysql双活方案#### 说明Mysql主主互备即为两个mysql的互为备份机##### Windows下安装步骤(Linux下步骤类似，基本就是装上mysql，然后修改配置来完成主从的设置)- step1、下载mysql的zip包(目前测试版本为5.7.28不带debug的包)并解压两次，文件夹改名为master和slave，要安装两台机器或者一台机器用不同的端口装两个实例- step2、在m
在Linux系统中，高可用性是至关重要的。为了确保系统的稳定性和可靠性，双活配置已经成为了一种常见的解决方案。其中一种常见的双活配置技术就是Linux Heartbeat。
Linux Heartbeat是一个开源软件，它允许在两个或多个服务器之间实现高可用性。它通过监控主服务器的状态，当主服务器出现故障时，自动将服务转移到备用服务器上，从而保证系统的连续性。这种双活配置可以提高系统的稳定性，减
原创
2024-04-11 10:15:44
88阅读
MySQL双主高可用配置前言一、MySQL的安装1、清除系统自带MySQL或mariadb2、获取对应版本MySQL程序3、安装并初始化二、MySQL双主搭建1、创建同步用户2、确保每台数据库服务器的id唯一,并设置开机自动开启复制3、锁表 - - -锁表过程中不要退出4、确认二进制文件名及位置5、解锁6、设置复制同步位7、开启复制8、验证三、高可用搭建1、关闭防火墙或开放vrrp协议2、安装k
转载
2023-08-06 13:30:19
493阅读
【双机配置】服务端： 两台 Dell R730 双路E5 服务器 使用一个内网环境，网段20， ping 测试互通 主服ip： 192.168.20.176： 27017 从服ip： 192.168.20.178： 27015客户端： ThinkPad T460P 【系统环境】服务端： windows Server 2012 R2客户端： Wi
转载
2023-09-18 15:38:35
259阅读
一，问题描述 接之前一篇博客@schedule定时任务开启两次，使用xml配置解决以后，楼主部署war包上生产遇到另一个问题。 由于楼主公司paas应用是双边部署，异地双活机制，导致每台服务器的定时任务都启动一次。二，解决方案 想过用数据库乐观锁解决问题，执行定时任务之前去数据库获取锁，其他线程将无法获取锁执行程序。考虑到性能问题，采用另一种方案：redis锁。当然还有zookeeper方式
转载
2023-08-10 14:06:22
108阅读
双key绑定模式该模式为新的redis应用自创模式，参考angularjs双key绑定实时更新数据模式、也可等同于db的映射模式，源于当前网络对于redis穿透、击穿没有很好的解决方案。目前已知的方式有1、布隆过滤器(代码繁琐、适合大量key进行节约缓存空间，非透明化、不适用于当前项目中量数据)
2、redis对key的频率控制，该做法无异于剥夺了redis的高并发属性，假如控制redis对ke
转载
2023-06-02 09:22:50
735阅读
