HDFS HA 需要 设置静态IP、安装 jdk、设置ssh无密码登录、安装zookeeper、安装hadoop。在Hadoop2.X之前，Namenode是HDFS集群中可能发生单点故障的节点，每个HDFS集群只有一个namenode，一旦这个节点不可用，则整个HDFS集群将处于不可用状态。HDFS高可用（HA）方案就是为了解决上述问题而产生的，在HA HDFS集群中会同时运行两个Namenod
转载
2023-10-10 21:51:21
88阅读
下面的blade命令时阿里开源的ChaosBlade 分布式系统高可用原则高可用的分布式系统一般需要满足以下原则：失败重试实例隔离请求限流服务降级服务熔断流量调度开关&预案监控告警日志跟踪混沌实验场景实践我们以 A 调用 B，B 调用 C，A 同时也调用 D 举例，A1、A2 是 A 服务的多个实例，依次类推。失败重试实验场景：调用下游服务实例异常。容错方案：会再次请求另外一个服
转载
2023-07-26 16:59:15
124阅读
分布式架构知识本文力求从分布式基础理论，架构设计模式，工程应用，部署运维，业界方案这几大方面，介绍基于MSA(微服务架构)的分布式的知识体系大纲。从而对SOA到MSA进化有个立体的认识，从概念上和工具应用上更近一步了解微服务分布式的本质，身临其境的感受如何搭建全套微服务架构的过程。SOA到MSA的进化SOA面向服务架构由于业务发展到一定层度后，需要对服务进行解耦，进而把一个单一的大系统按逻辑拆分成
转载
2024-07-31 13:06:04
45阅读
高可用HA（High Availability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。
方法论上，高可用是通过冗余+自动故障转移来实现的。
原创
2017-03-16 16:56:25
638阅读
导语 本文首先介绍了微信开源分布式队列 PhxQueue 的诞生背景及架构设计，然后着重在设计、性能、存储层 Fail over 过程三方面与 Kafka 进行了对比。期望了解 PhxQueue 或 Kafka 的读者均能从中获益。开源地址：https://git.code.oa.com/wxg-td/phxqueuePhxQueue 是微信开源的一款基于 Paxos 协议实现的高可用、高吞吐和高
转载
2023-10-14 08:32:10
74阅读
ＣＡＰ理论：在一个分布式系统（指互相连接并共享数据的节点的集合）中，当涉及读写操作时，只能保证一致性（Consistence）、可用性（Availability）、分区容错性（Partition Tolerance）三者中的两个，另外一个必须被牺牲。分布式系统理论上不可能选择 CA 架构，只能选择 CP 或者 AP 架构CAP 关注的粒度是数据，而不是整个系统。CAP 是忽略网络延迟的。正常运行情
转载
2023-08-08 10:15:19
121阅读
分布式架构 高可用 本文将通过自建架构图 进行讲解如图采用了分布式、微服务架构，将传统系统进行重构后的效果微服务架构体系对多个层面进行探索、分析和优化，本文不在详细阐述微服务、分布式架构根据公司、企业需求定制化构造而来，目的细化模块间的调用，链路更加清晰明了，不同环节高可用方案不同，优化手段也存在差异。分析思考如果系统高峰期间可以处理500W/S 请求流量，那么当请求到达1000W/S请求流量时
转载
2023-08-30 18:01:12
76阅读
一、Redis高可用高可用，也叫HA（High Availability），是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。 如果在实际生产中，如果redis只部署一个节点，当机器故障时，整改服务都不能提供服务了。这就是我们常说的单点故障。 如果redis部署了多台，当一台或几台故障时，整个系统依然可以对外提供服务，这样就提高了服务的可用性。二、Redis
转载
2023-07-07 22:07:08
111阅读
在分布式架构中，SOA 和微服务架构是最常见的两种分布式架构，而且目前服务网格的概念也越来越火了，我们就先从这些常见的架构开始。SOA 架构解析SOA 全称是：Service Oriented Architecture，中文释义为 “面向服务的架构”。它是一种设计理念，其中包含多个服务，服务之间通过相互依赖最终提供一系列完整的功能。各个服务通常以独立的形式部署运行，服务之间通过网络进行调用，架构图
转载
2023-07-24 19:35:39
80阅读
一、分布式架构种类集群目前可以分3类，高可用性集群（High Availability Cluster）HA、负载均衡集群(Load Balance Cluster)LB、高性能集群(High Performance Computing Cluster)HPC，这3类集群有什么区别呢？二、高可用性集群HA一个集群只有一台主机，其他的节点都是从机的模型，从机可能什么活都不干，只负担主机的后备，也可能
转载
2023-07-13 15:03:40
97阅读
简介：高可用(High Avalilability)指两台或两台以上业务系统启动着相同的服务，如果其中一台有故障，另外一台自动接管工作，实现故障转移。一、Keepalived 简介：Keepalived是服务器一种高性能且轻量级的高可用或热备解决方案，通过VRRP协议(虚拟路由冗余协议)来防止服务器静态路由单点故障的发生，结合Nginx可以实现WEB前端服务的高可用。 1. 基础
转载
2023-07-09 13:00:10
0阅读
架构图： 一、环境规划：Pd node192.168.9.42192.168.15.57Tikv node192.168.15.2192.168.15.2192.168.15.23tidb192.168.15.57192.168.15.104VIP192.168.15.219Haproxy -v1.4.20192.168.15.57192.168.9.
原创
2016-11-17 16:56:33
3617阅读
点赞
# 分布式高可用架构部署：代码示例与图解
在当今快速发展的互联网时代，高可用性已成为衡量系统稳定性和可靠性的重要指标。分布式高可用架构是实现这一目标的关键技术之一。本文将通过代码示例和图解，为您介绍分布式高可用架构的部署方法。
## 分布式高可用架构概述
分布式高可用架构是一种将应用和服务分布在多个服务器或数据中心上，以提高系统的可用性和容错能力的架构。它通过负载均衡、故障转移、数据复制等技
原创
2024-07-23 10:04:00
34阅读
# 分布式高可用存储架构实现指南
## 引言
在当前大数据时代，存储海量数据并保证数据的高可用性是一项非常重要的任务。分布式高可用存储架构是解决这个问题的重要手段之一。本文将针对这个问题，向小白开发者介绍如何实现分布式高可用存储架构。
## 整体流程
下面是实现分布式高可用存储架构的整体流程，我们将通过以下几个步骤来完成：
```mermaid
flowchart TD;
A[需求分
原创
2023-08-31 10:32:50
65阅读
本文主要分享目前主流的分布式架构、分布式架构中常见理论以及如何才能设计出高可用的分布式架构。分布式架构中，SOA和微服务架构是最常见两种分布式架构，而且目前服务网格的概念也越来越火了，那本文就先从这些常见架构开始说起。一、SOA架构解析SOA（Service Oriented Architecture）的中文释义为 “面向服务的架构”，是一种设计理念，其中包含多个服务，服务之间通过相互依赖最终提供
转载
2023-08-04 21:34:45
83阅读
分布式与集群下文会涉及到大量的分布式和集群术语，这里我们先来复习一下集群和分布式的概念，加深一下理解。目前的项目很少会采用单机架构了，一是因为单机性能有限，二是因为单机服务一旦故障整个系统就无法继续提供服务了。所以目前集群和分布式的架构使用得很广泛，主要就是为了解决上述两个问题，一个性能问题，一个故障问题，通过分布式架构解决性能（高并发）问题，通过集群架构解决故障服务（高可用）问题。分布式架构分布
转载
2024-01-05 10:30:05
82阅读
许文奇，蚂蚁金服高级技术专家，SOFAStack 商业化产品技术 Leader，多年分布式架构及中间件研发经验，负责过蚂蚁金服分布式架构在多家金融机构的咨询和落地。本文根据他在 2019 蚂蚁金服 ATEC（Ant Technology Exploration Conference）科技大会上海站的分享整理。本次分享主要会从单体架构和微服务架构的对比开始，后面重点谈一下实施金融级分布式架构的常见三
转载
2024-01-05 22:18:03
48阅读
在微服务架构的项目中，至少要包含两类服务：Provider（提供者）和 Consumer（消费者）。常见的微服务架构有：Dubbo/Dubbox，Spring Cloud微服务架构项目之间一般有两种调用方式：即 RPC 和 RESTful。微服务架构设计原则：围绕业务切分，单一职责，谁创建，谁负责大型票务类电商网站架构采用 Docker 环境进行项目环境搭建和配置采用 MySQL 作为系统数据库并
转载
2023-07-09 13:31:04
75阅读
一、分布式架构定义什么是分布式架构分布式系统（distributed system） 是建立在网络之上的软件系统。内聚性：是指每一个数据库分布节点高度自治，有本地的数据库管理系统。透明性：是指每一个数据库分布节点对用户的应用来说都是透明的，看不出是本地还是远程。在分布式数据系统中，用户感觉不数据是分布的，即用户不须知道关系是否分割，有无副本，数据存在于那个站点以及事物在哪个站点上执行。简单来说：在
转载
2023-09-19 06:27:02
77阅读
便，更有针对性。缺点： 公用模块无法重复利用，开发性的浪费1.3
转载
2024-01-25 11:38:33
91阅读
