高可用是分布式系统架构设计中必须考虑的因素之一，它通常是指通过设计减少系统不能提供服务的时间。Apollo 在高可用设计上下了很大的功夫，下面我们来简单的分析下：1）某台Config Service 下线
无影响，Config Service 可用部署多个节点。2）所有 Config Service 下线
所有 Config Service 下线会影响客户端的使用，无法读取最新的配置。可采用读取本
转载
2023-07-19 11:00:03
99阅读
一. HDFS 1.流式数据：关注数据的时效性，数据一点一点的流过来，一点一点的处理，而不是积攒起来一起处理。 2.hdfs的基础结构：client，namenode，datanode，secondarynamenode四部分组成。client：
- 文件切分
- 从NameNode获取文件的位置信息
- 在DataNode读写数据
- 通过命令/api访问HDFS
namenod
转载
2024-04-17 09:33:44
55阅读
本篇的题目其实比较大，所以在写的时候，我其实是有些“惶恐”的，怕这篇完成后有标题档的嫌疑。不过为了将自己过去多年的经历和最近1年改造架构的想法，做一个阶段性总结，还是有必要好好写一写的，所以如果写得不好，大家多包涵，欢迎大家补充。 定义目标既然我们的目标是做到高可用，那么我们就有必要先明确清楚高可用的含义，并通过拆解目标，让目标可以被量化。按照我的理解，可以将目标按照以下三条进行拆解：&
高可用架构 高可用架构社区
在如今快速发展的IT环境中，系统的高可用性已成为企业必须面对的挑战。特别是在高可用架构方面，无论是公共云、私有云，还是混合云架构，高可用性都显得尤为重要。在高可用架构的世界里，系统的连续性和耐用性是被优先考虑的，确保用户能够不间断地使用服务成为了各大公司的首要任务。
让我们用一个四象限图来帮助理解不同高可用架构的类型和优劣势。
```mermaid
quadran
一、元数据服务高可用1.1高可用的需求故障类型：软件故障硬件故障人为故障灾难：数据中心级别不可用故障不可避免，灾难有时发生如果HDFS不可用，业务停止的损失极大，所以高可用就至关重要1.2高可用形式服务高可用有热备份：有另一个备份节点，发生故障时可直接切换冷备份：将关键性文件切换到另外位置，发生故障时通过备份数据进行恢复。故障恢复操作：人工切换自动切换人工的反应、决策时间都更长，高可用需要让系统自
转载
2024-05-18 21:37:42
99阅读
Hadoop HA（High Available）通过同时配置两个处于Active/Passive模式的Namenode来解决上述问题，分别叫Active Namenode和Standby Namenode. Standby Namenode作为热备份，从而允许在机器发生故障时能够快速进行故障转移，同时在日常维护的时候使用优雅的方式进行Namenode切换。Namenode只能配置一主一备，不能多
转载
2024-04-05 18:56:47
26阅读
Kubernetes (K8S) 是一个用于自动化部署、扩展和管理容器化应用程序的开源容器编排平台。它提供了一个丰富的 API，可以用于管理基于容器的应用程序。在实际应用中，为了确保 Kubernetes API 的高可用性，我们需要对 API 进行一些特殊的配置和设置。在本篇文章中，我将为你详细介绍在 Kubernetes 中如何实现 API 的高可用性。
整体流程：
以下是实现 Kuber
原创
2024-01-18 11:10:20
130阅读
文章目录前文Hadoop3.3.1 HA 高可用集群的搭建QJM 的 NameNode HAHadoop HA模式搭建（高可用）1、集群规划2、Zookeeper集群搭建：3、修改Hadoop集群配置文件修改 vim core-site.xml修改 hadoop-env.sh修改 hdfs-site.xmlworkersYarn高可用**修改 mapred-site.xml**修改 yarn-s
hadoop2.0已经发布了稳定版本了，增加了很多特性，比如HDFS HA、YARN等。最新的hadoop-2.4.1又增加了YARN HA注意：apache提供的hadoop-2.4.1的安装包是在32位操作系统编译的，因为hadoop依赖一些C++的本地库，建议第一次安装用32位的系统,此处我的环境是：VM12+CentOS6.81.修改Linux主机名 2.修改IP 3.修改主机名和IP的映
转载
2024-10-12 12:57:32
46阅读
高可用不仅包括：系统失败或者崩溃、应用层或者中间层错误、网络失败、介质失败、人为失误还包括：分级与容灾、计划宕机与维护，也就是说高可用不仅仅是应该考虑到系统本身的问题还应该考虑到天灾人祸，并且有一套简单的系统维护方法。最佳的实例，其中最上面3泰代表客户端的应用主机，接下来是1+1的data guard环境，而data
转载
2023-10-10 20:15:23
184阅读
【PostgreSQL架构】PostgreSQL的最佳PG群集高可用性（HA）解决方案
PostgreSQL架构 ⟶【PostgreSQL架构】PostgreSQL的最佳PG群集高可用性（HA）解决方案 intelligentx 22 January 2020SEO TitleTop PG Clustering High Availability (HA)
转载
2023-07-21 17:20:07
213阅读
MHA高可用架构解决方案主从复制mha高可用欢迎来到 来到大浪涛天的博客 ！一、MHA高可用架构解决方案1. MHA的介绍2. MHA集群结构说明2-1. 服务角色2-1-1. MHA Manager：2-1-2. MHA node：2-2. MHA提供的工具脚本2-3. MHA工作原理2-3-1. MHA Failover实现方式2-4. candidate_master=1 应用场景2-5.
转载
2024-06-14 09:35:10
43阅读
本篇的内容将会覆盖MySQL 5. 7数据库体系结构、InnoDB存储引擎、MySQL事务和锁、性能优化、服务器全面优化、性能监控、主从复制，以及PXC集群、MHA自动故障转移群集、MGR组复制、Keepal ived+双主复制等高可用集群架构的设计与实践，还有针对海量数据进行分库分表和Mycat中间件介绍和实战操作。受限于文章篇幅的问题，小编只能为大家展示部分的内容，完整版PDF的免费获取方式在
转载
2023-06-30 20:22:24
136阅读
MYSQL–架构–理论–01–高可用方案的优缺点、选型高可用考虑点如果数据库发生了宕机或者意外中断等故障，能尽快恢复数据库的可用性，尽可能的减少停机时间，保证业务不会因为数据库的故障而中断。用作备份、只读副本等功能的非主节点的数据应该和主节点的数据实时或者最终保持一致。当业务发生数据库切换时，切换前后的数据库内容应当一致，不会因为数据缺失或者数据不一致而影响业务。一、主从或主主半同步复制使用双节点
转载
2022-05-04 13:58:03
340阅读
三、 剖析架构1. CDNCDN系统能够实时地根据网络流量和各节点的连接、负载状况以及到用户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上。其目的是使用户可就近取得所需内容，解决 Internet网络拥挤的状况，提高用户访问网站的响应速度。对于大规模电子商务平台一般需要建CDN做网络加速，大型平台如淘宝、京东都采用自建CDN，中小型的企业可以采用
转载
2023-09-14 21:01:29
124阅读
文档结构： 由于博主之前是Oracle dba,oracle 高可用一般是rac,以及搭建ADG,一个是基于实例的高可用，一个是基于数据的容灾，甚至也有rac+adg的方式。Postgres有同步和异步两种同步方式，我发现，mysql,oracle,postgresql 这两种同步模式原理都是一个德行，可能都是绕不开关系型数据库吧。异步方式主库上的事务不会等待备库
转载
2023-07-14 19:01:59
622阅读
摘要:Oracle数据库在各类应用系统中负责存储平台所有的用户数据，数据库的可靠性及安全性直接影响平台的安全运行，目前采用的Oracle Replication方式来实现的数据库高可靠性已经显示出了弊端，本文介绍并分析了目前比较流行的几种数据库高可用性的架构：Oracle Replication、Oracle Rac、Oracle 主机HA等，希望给大家一个参考。
1 什么是高可用性（
转载
2023-10-08 11:54:23
256阅读
Consul是由HashiCorp基于Go语言开发的支持多数据中心分布式高可用的服务发布和注册服务软件，采用Raft算法保证服务的一致性，且支持健康检查。Consul架构只有一个数据中心的Consul的架构图如下：我们可以看到，有三个不同的服务器由Consul管理。整个架构通过使用Raft算法工作，这有助于我们从三个不同的服务器中选出一个领导者。然后根据诸如Follower和Leader之类的标签
转载
2023-10-14 03:07:45
126阅读
kubernetes 架构 四层，如下：Client层：即Kubernetes集群外部用户、客户端等；服务访问层：即由Traefik ingress实现服务发现、负载均衡和路由规则定义等；业务应用层：即基于Kubernetes平台构建和运行企业业务应用，如CI/CD持续集成、微服务项目、监控告警和日志管理、私有镜像仓库等服务；基础设
转载
2024-02-16 10:15:22
44阅读
一，什么是 Rancher？ 官网地址：什么是 Rancher？ | Rancher ManagerRancher 是一个 Kubernetes 管理工具，让你能在任何地方和任何提供商上部署和运行集群。Rancher 可以创建来自 Kubernetes 托管服务提供商的集群，创建节点并安装 Kubernetes，或者导入在任何地方运行的现有 Kubernetes 集群。Rancher 基
转载
2023-08-14 11:27:09
159阅读
