1. 现实问题1.1 任务异步处理 并发环境下,由于来不及同步处理,请求往往会发生堵塞,比如说,大量的insert,update之类的请求同时到达MySQL,直接导致无数的行锁表锁,甚至最后请求会堆积过多,从而触发too many connections错误。通过使用消息队列, 异步处理请求,从而缓解系统的压力。将不需要同步处理的并且耗时长的操作由消息队列通知消息接收方进行异步处理。减少了应用程
= 数据库之MHA可用集群部署及故障切换_ljj的学习笔记-CSDN博客目录一、MHA概念1、MHA 的组成2、MHA 的特点二、搭建MySQL+MHA1、修改mysql节点的主机名2、修改三台MySQL服务器的主配置文件/etc/my.cnf,并创建命令软链接3、配置MySQL一主两从4、安装 MHA 软件5、在所有服务器上配置无密码认证6、在 manager 节点上配置 MHA7、第一次配置
转载 2024-03-07 21:47:52
30阅读
并发、对稳定性要求极高的系统中,可用的是必不可少的,当然ActiveMQ也有自己的集群方案。从ActiveMQ 5.9开始,ActiveMQ的集群实现方式取消了传统的Master-Slave方式,增加了基于ZooKeeper + LevelDB 的 Master-Slave 实现方式。一. ActiveMQ可用原理使用ZooKeeper(集群)注册所有的ActiveMQ Broker。只
转载 2023-10-01 00:09:17
87阅读
目录 1 前期准备2 失效转移failover2.1 failover介绍2.2 代码测试2.2.1 两台mq都关闭,尝试发送消息2.2.2 启动两台mq,发送、接收消息2.2.3 停止broker1,发送、接收消息2.3 TransportListener重连监听3 brocker集群部署(mysql)1 前期准备可用部署的前提是做好了上篇文章的静态网络连接的配置 broker1和b
转载 2024-03-27 05:54:26
67阅读
1、综述通过之前的文章,我们讨论了ActiveMQ的基本使用,包括单个ActiveMQ服务节点的性能特征,关键调整参数;我们还介绍了单个ActiveMQ节点上三种不同的持久化存储方案,并讨论了这三种不同的持久化存储方案的配置和性能特点。但是这还远远不够,因为在生产环境中为了保证让我们设计的消息服务方案能够持续工作,我们还需要为消息中间件服务搭建集群环境,从而在保证消息中间件服务可靠性和处理性能。2
一. 简介     activemq可用集群只能系统的可用性,如果需要提高并发,则需要搭建负载均衡。            实现负载,就是俩个可用集群,每个集群的主节点来负载均衡。            zookeeper集群的安装说明,请参照笔者的另一篇
转载 2023-11-07 19:39:55
205阅读
  什么是可用?我理解的可用,就是在机器当机,机房网络不通,服务进程挂掉,不影响业务层的继续。对于数据库来讲,就是数据不丢,数据准确。可横向动态扩展,理论上通过加机器就可实现性能的提高,但是做起来却是很难的一件事~~常见的架构一、 master-slave架构,读写分离优点: 部署简单单向同步方式,基本上不会出现冲突。读写分离,可提高读性能缺点: master存在单点
一、MySQL+MyCat分库分表1 MyCat简介java编写的数据库中间件Mycat运行环境需要JDK.Mycat是中间件.运行在代码应用和MySQL数据库之间的应用.前身 : corba. 是阿里开发的数据库中间件.实现MySQL数据库分库分表集群管理的中间件.曾经出现过重大事故. 二次开发,形成Mycat.使用MyCat之后,编写的所有的SQL语句,必须严格遵守SQL标准规范.insert
在Kubernetes(K8S)中实现数据库可用是一个很重要的话题,尤其在现代云原生应用开发中,数据库是应用的核心组件之一。在本文中,我将向你介绍如何在K8S中实现数据库可用。首先,让我们了解一下整个流程: | 步骤 | 操作 | |------|----------------------| | 1 | 配置StatefulSet | | 2
原创 2024-04-28 10:13:15
84阅读
【环境介绍】系统环境:Red Hat Enterprise Linux 7 + 5.7.18 + MHA version 0.57【测试步骤:自动切换】当前数据库状态: 系统IP主机名备注版本xx系统192.168.142.111mysqlmha1主库5.7.18 -log MySQL Community Server (GPL)192.168.142.112mysqlmha2备(预主库)19
几个月没有更新博客了,已经长草了,特意来除草。本次主要分享如何利用consul来实现redis以及mysql的可用。以前的公司mysql是单机单实例,可用MHA加vip就能搞定,新公司mysql是单机多实例,那么显然这个方案不适用,后来也实现了故障切换调用dns api来修改域名记录,但是还是没
转载 2021-01-09 11:18:00
399阅读
2评论
引言 传统企业级应用一般采取单台数据库,吞吐所有应用的读写,随着互联网的高速发展,以及微服务架构越来越普及,往往采用分库分表来支撑高速增长的大量业务数据吞吐。分库分表主要有两种方式:水平分表和垂直分库。 垂直分库即基于业务层面,将不同业务数据存储到不同的数据库中。 水平分表即把一个表的数据按照一定路
转载 2019-04-19 08:48:00
127阅读
2评论
本次主要分享如何利用consul来实现redis以及mysql的可用。以前的公司mysql是单机单实例,可用MHA加vip就能搞定,新公司mysql是单机多实例,那么显然这个方案不适用,后来也实现了故障切换调用dns api来修改域名记录,但是还是没有利用consul来实现可用方便,后面会说明
转载 2021-07-25 16:57:04
573阅读
ActiveMQ简介   MQ是消息中间件,是一种在分布式系统中应用程序借以传递消息的媒介,常用的有ActiveMQ,RabbitMQ,kafka。ActiveMQ是Apache下的开源项目,完全支持JMS1.1和J2EE1.4规范的JMS Provider实现。消息类型包括点对点(queue),一对多(topic),本次生产环境用的是queue。1、部署环境   三个ActiveMQ
转载 2024-03-15 10:10:32
27阅读
一,ActiveMQ可用性的架构ActiveMQ可用性架构是基于Master/Slave 模型的。ActiveMQ总共提供了四种配置方案来配置HA,其中Shared Nothing Master/Slave 在5.8版本之后不再使用了,并在ActiveMQ5.9版本中引入了基于Zookeeper的Replicated LevelDB Store HA方案。 二,Master/Sla
转载 2024-04-03 13:27:10
116阅读
目录优先级第一:架构优化分布式缓存读写分离水平切分小结第二:硬件优化第三:DB优化(数据库配置)第四:SQL优化sql语句优化执行计划SQL优化小结 优先级 (图一:优化优先级) 正如上图所示,提升数据库性能要从四个角度来处理,并且优先级是按照架构、硬件、DB(数据库配置)、SQL的顺序来做。 第一:架构优化一般来说在并发的场景下对架构层进行优化其效果最为明显,常见的优化手段有:分布式缓存
熟悉MAA解决方案中使用的可用性特性以便基于架构进行调整。以下将对主要高可用架构进行图/文功能说明。4.1. 可用架构介绍 ¶4.1.1. KingbaseES 读写分离集群架构 ¶4.1.2. KingbaseES Clusterware共享存储集群 ¶4.1.3. Kingbase FlySync异构数据同步架构&nbs
什么是可用?目前的理解,可用是指通过设计减少系统不能提供服务的时间。如果系统一直能不间断提供服务,我们可以说系统的可用性是100%;如果系统在时间单位内有1%的时间不能提供服务,我们可以说系统的可用性是99%。业内通常使用MTTF和MTTR来量化一个模块的可用性。平均无故障时间(MTTF)MTTF(mean time to failure),指模块处在正常服务状态的平均时间。平均修复时间(MT
几个月没有更新博客了,已经长草了,特意来除草。本次主要分享如何利用consul来实现redis以及mysql的可用。以前的公司mysql是单机单实例,可用MHA加vip就能搞定,新公司mysql是单机多实例,那么显然这个方案不适用,后来也实现了故障切换调用dns api来修改域名记录,但是还是没
转载 2018-04-13 16:40:00
81阅读
2评论
MHA工作原理 MHA的组成 MHA由node和manager组成; MHA Node(数据节点): 相当于监控客户端,所有数据库机器都需要部署node MHA Manager(管理节点) Manager相当于服务端,MHA Manager会定时探测集群中的master节点,当master出现故障时 ...
转载 2021-07-23 20:00:00
308阅读
  • 1
  • 2
  • 3
  • 4
  • 5