背景：下一个视频版本，从架构师视角，尼恩为大家打造高可用、高并发中间件的原理与实操。目标：通过视频和博客的方式，为各位潜力架构师，彻底介绍清楚架构师必须掌握的高可用、高并发环境，包括但不限于：高可用、高并发nginx架构的原理与实操高可用、高并发mysql架构的原理与实操高可用、高并发nacos架构的原理与实操高可用、高并发rocketmq架构的原理与实操高可用、高并发es架构的原理与实操高可用、
转载
2024-07-19 07:21:31
203阅读
ES6 初识ES6 是 ECMAScript 6.0 的简写，即 JavaScript 语言的下一代标准，已经在 2015年6月正式发布了，它的目标是让JS能够方便的开发企业级大型应用程序，因此，ES6的一些规范正在逐渐向Java、C# 等后端语言标准靠近。在 ES6 规范中，比较重大的变化有以下几个方面：新增 let、const 命令 来声明变量，和var 相比，let 声明的变量不存
Elasticsearch天生就支持分布式部署，通过集群部署可以提高系统的可用性。本文重点谈一谈Elasticsearch的集群节点相关问题，搞清楚这些是进行Elasticsearch集群部署和拓扑结构设计的前提。关于如何配置集群的配置文件不会在本文中提及。（本文写作背景是Elasticsearch 2.3）节点类型1. 候选主节点（Master-eligible node） 一个节点启动后，
转载
2024-05-14 15:10:02
102阅读
目录前言一、ES 高可用方案1.1、ES 双中心主备集群架构1.2、ES 流量隔离三集群架构1.3、ES 集群深度优化提升二、会员 Redis 缓存方案2.1、 ES 近一秒延时导致的 Redis 缓存数据不一致问题的解决方案2.2、Redis 双中心多集群架构三、高可用会员主库方案3.1、 MySQL 双中心 Partition 集群方案3.2、 会员主库平滑迁移方案3.3、MySQL 和 ES
转载
2024-04-01 01:10:28
52阅读
1. keepalived简介Keepalived软件起初是专门为LVS负载均衡软件设计的用来管理并监控LVS集群系统中各个服务节点的状态，后来又加入了可以实现高可用的VRRP功能。因此，Keepalived除了能够管理LVS软件外，还可以作为其他服务的高可用解决方案软件。Keepalived软件主要是通过VRRP协议实现高可用功能的,VRRP是Virtual Router Redundancy
转载
2024-04-12 22:11:02
123阅读
elasticsearch高可用 原理 ES是如何解决高可用ES是一个分布式全文检索框架，隐藏了复杂的处理机制，核心数据分片机制、集群发现、分片负载均衡请求路由。ES的高可用架构ES基本概念名词Cluster代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。es的一个概念就是去中心化，字面上理解就是无中心节点，这是对于集群外
转载
2024-03-08 17:43:36
174阅读
作为一个分布式架构中的协调组件，zookeeper起着举足轻重的作用。并且在多个分布式架构中，总是能够看到zookeeper的身影，例如dubbo+zookeeper通过rpc远程调用实现微服务架构，再比如kafka通过zookeeper作为元数据管理和协调。 那么下面我们就一起来探索一下如何搭建一个高可用的zookeeper集群以及zookeeper实现高可用的原理又是什么？什么是zookeep
转载
2023-11-09 10:05:24
141阅读
一、什么是高可用高可用HA（High Availability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。 例如：两台haproxy其中一台坏了，另一台顶替主的还能继续工作，就是高可用 haproxy将请求发送给剩下的web01,web02网页，实现轮询效果，通过web01中的一台坏了，web02顶替上去实现负载均衡假设系统一直能够提供服务，我们说系
转载
2024-04-23 15:43:17
115阅读
很多时候我们会用nginx做应用服务的负载均衡，但这只是保证应用服务能力的一项措施，如果nginx是单机的是不是也有可能服务没挂，但nginx出问题了，那相当于你的服务也没法访问了，所以在一些场景中也需要保证nginx的高可用。一般我们会用keepalived做nginx的高可用，采用策略有：主备策略或者主主策略，这里我介绍下主备策略，它的思想是：假如有AB两台主机+虚拟IP地址一个，A作为主一直
转载
2024-03-19 22:31:06
83阅读
Zookeeper原理及部署Zookeeper介绍：ZooKeeper是一个开源分布式协调服务、分布式数据一致性解决方案。可基于ZooKeeper实现命名服务、集群管理、Master选举、分布式锁等功能。高可用：为了保证ZooKeeper的可用性，在生产环境中我们使用ZooKeeper集群模式对外提供服务，并且集群规模至少由3个ZooKeeper节点组成。集群至少由3个节点组成，ZooKeeper
转载
2024-01-18 21:53:16
39阅读
目录什么是高可用？解决的问题？双机热备方案keepalived是什么？故障转移机制安装Nginx安装Nginx:安装keepalived修改主机（192.168.16.128）keepalived配置文件修改备机（192.168.16.129）keepalived配置文件什么是高可用？ 高可用HA（High Ava
转载
2024-04-07 14:13:10
72阅读
# 如何实现 Nginx 的高可用
### 一、流程概述
在实现 Nginx 的高可用性方面，我们通常会采用负载均衡和高可用性集群的方式来进行配置。通过负载均衡，将流量分发到多个 Nginx 服务器，保证系统在一个 Nginx 服务器宕机时仍能正常运行。
下面将详细介绍使用 Keepalived 和 Nginx 结合实现 Nginx 的高可用的步骤及代码示例。
### 二、配置步骤
|
原创
2024-05-15 10:50:24
113阅读
1Kafka 宕机引发的高可用思考问题要从一次Kafka的宕机开始说起。笔者所在的是一家金融科技公司，但公司内部并没有采用在金融支付领域更为流行的 RabbitMQ ，而是采用了设计之初就为日志处理而生的 Kafka ，所以我一直很好奇Kafka的高可用实现和保障。从Kafka部署后，系统内部使用的Kafka一直运行稳定，没有出现不可用的情况。但最近系统测试人员常反馈偶有Kafka消费者收不到消息
目录1、keepalived软件介绍2、keepalived的安装及VRRP的实现3、总结1、keepalived软件介绍 keepalived是由c语言编写的一个路径选择软件，是IPVS的一个扩展性项目，为IPVS提供高可用性（故障转移）特性，它的高可用性是通过VRRP协议实现的，并实现了对负载均衡服务器池中的real server进行健康状态检测，当real serv
转载
2024-05-10 03:45:39
29阅读
高可用集群原理LVS集群DR模式简单的架构图如下所示：在上图的架构中，当Director服务器因软件、硬件、人为原因造成故障时，整个集群服务不可用，因此，需要再添加一台服务器实现Director服务高可用。整个系统的架构图如下所示： 此时，客户端发送请求经过路由器到达Primary （Active）Director服务器，Primary Director服发务器根据调度规则，将请求发送至不同的R
Elasticsearch为什么要集群？集群有什么作用？高可用高可用（High Availability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。如果系统每运行100个时间单位，会有1个时间单位无法提供服务，我们说系统的可用性是99%负载均衡将流量量均衡的分布在不同的节点上，每个节点都可以处理一部分负载，并且可以在节点之间动态分配负载，以实现平衡高
背景： 计划使用elasticsearch作为搜索引擎，当数据量太大，会导致单节点无法满足容量和查询。所以需要集群来提升整体容量和查询容量。elasticsearch自动的分布所有数据和查询负载到所有的可用节点。 无需改造应用，elasticsearch知道如何平衡多个节点以提供扩展性和高可用。文档->分片->节点索引其实是一个逻辑上的概念，包括
转载
2024-09-18 13:05:58
56阅读
导语 | 为了进一步满足腾讯云 Elasticsearch 客户对服务稳定性、集群高可用性等容灾能力的要求。腾讯云 ES 产品提供了跨可用区部署的解决方案，本文将为大家介绍实现原理与实践案例。文章作者：吴荣，腾讯云 Elasticsearch 研发工程师。引言目前腾讯云 ES 集群可以支持双可用区及三可用区的集群部署，且支持单可用区平滑升级到多可用区集群。当一个可用区出现故障时，剩余可用区依然能够
写在开篇本文只分享各个链路环节的配置对接，关于环境的搭建，比如kafka集群、es集群的搭建等请自行完成。还有，业务应用的日志可以是你的其他业务日志，希望本文可以起到抛砖引用的效果。测试架构这个架构描述了一个将来自不同数据源的数据通过 Kafka 中转，然后使用 Logstash 将数据从 Kafka 中读取并处理，最终将处理后的数据再写回到 Kafka 中，以供 Elasticsearch 进行
转载
2024-10-18 18:52:12
19阅读
高可用方案初探高可用方案CAP计算高可用对称式高可用非对称式高可用存储高可用架构模式双机热备主备主从双主集群和数据分区集群模式数据分区异地多活 高可用方案单点系统可能会由于断电，宕机等情况，使得系统不可用，在行业竞争激烈的情况下，系统的可用性会影响公司获客能力及口碑。高可用分为计算高可用和存储高可用。CAPCAP分布式理论，C：一致性，A：可用性，P：分区容错性。 C：站在用户角度看，读操作能够
转载
2024-09-27 12:58:35
45阅读
