本文转载自：职说（1）可用性设计解决思路：复制+冗余副作用：复制+冗余一定会引发一致性问题保证“读”高可用的方法：复制从库，冗余数据，如下图 带来的问题：主从不一致 解决方案：见下文 保证“写”高可用的一般方法：双主模式，即复制主库（很多公司用单master，此时无法保证写的可用性），冗余数据，如下图 带来的问题：双主同步key冲突，引不一致 解决方案： a）方案一：由数据库或者业务层保证k
转载
2023-07-12 15:59:06
84阅读
首先了解下MySQL的内部存储机制，其实我们可以把常用工具MySql workbench当做是客户端，而MySQL是服务器，结合计算机网络里学习的内容，我们可以理解为两个应用程序在通信，也就是局域网内的CS架构。MySQL架构客户端依据通信协议请求服务端，而MySQL这个服务器执行SQL语句命令并给出反馈，整体架构如下：可以粗略的把MySQL服务器分为两层，上面的为Server层，主要包括连接器、
转载
2023-08-07 23:32:45
90阅读
什么是道，什么是术？道是事物发展的本质规律，术是事物发展的具体途径。规律只有一个，途径很多，条条大路通罗马， 罗马是道，大路是术 。道为本，术为途，如果事先知道罗马在哪里，那么遍地是路，路路相通。架构也是如此，如果能领悟架构的本质，就不会拘泥于现有的实践和理论框框，而以最直接的方式解决问题，无招胜有招。本文的内容包括架构的本质、架构的服务对象、架构师能力模型 、架构境界等。架构
转载
2023-05-02 12:37:45
127阅读
前一段时间的项目里用到了 Etcd（http://jolestar.com/etcd-architecture）， 所以研究了一下它的源码以及实现。网上关于 Etcd 的使用介绍的文章不少，但分析具体架构实现的文章不多，同时 Etcd v3的文档也非常稀缺。本文通过分析 Etcd 的架构与实现，了解其优缺点以及瓶颈点，一方面可以学习分布式系统的架构，另外一方面也可以保证在业务中正确使用
Etcd
RocketMQ整体结构BrokerBroker是RocketMQ的核心，提供了消息的接收，存储，拉取等功能，一般都需要保证Broker的高可用，所以会配置Broker Slave，当Master挂掉之后，consumer然后消费Slave；broker面向producer和consumer接收和发送消息 向nameserver提交自己的信息 是消息中间件的消息存储、转发服务器。 每个broker
转载
2024-09-24 09:12:50
41阅读
架构设计：介绍RocketMQ部署架构和技术架构。设计原理：介绍RocketMQ关键机制的设计原理，主要包括消息存储、通信机制、消息过滤、负载均衡、事物消息等。
原创
2022-02-23 11:10:00
3046阅读
架构设计：介绍RocketMQ部署架构和技术架构。设计原理：介绍RocketMQ关键机制的设计原理，主要包括消息存储、通信机制、消息过滤、负载均衡、事物消息等。
原创
2021-12-10 17:59:09
3159阅读
废话不多说，直奔主题。从实施效果来看，建议先拆分承保模块。1、保全模块和理赔模块功能涉及范围广，拆分表时需要其他模块提供查询接口和数据同步接口，如果采用另一种方案：使用同一个数据库，则做出来的系统是个半成品，做不到真正意义上系统的拆分。2、实验效果不明显，保险公司最为关注的是两点：出单效率和理赔效率，所以从这两个模块入手效果比较可观，带来的直接效益也比较明显，另外，保全模块是最浪费人力和资源的，而
转载
2023-09-18 19:18:12
249阅读
导语 | Apache Spark 是专为大规模数据处理而设计的快速通用计算引擎，在数据挖掘和机器学习领域有着广泛的应用，现在也已形成一个高速发展、应用广泛的生态系统。本文将为大家详细介绍 Spark 的核心技术原理，希望与大家一同交流。文章作者：熊峰，腾讯大数据研发工程师。一、Spark 介绍及生态Spark是UC Berkeley AMP Lab开源的通用分布式并行计算框架，目前已成
转载
2023-09-22 21:33:17
73阅读
深入学习ZooKeeper架构原理
ZooKeeper 是什么？ ZooKeeper 是一个针对大型分布式系统的可靠协调系统；它提供的功能包括：配置维护、名字服务、分布式同步、组服务等； 它的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户； ZooKeeper 已经成为 Hadoop 生态系统中的基础组件。 ZooKeeper特点 Zoo
转载
2023-09-08 06:18:48
106阅读
目录简介架构原理基本概念与MySQL的对比分片机制document路由原理集群发现机制shard&replica规则避免脑裂负载均衡相关配置容错过程与选举机制扩容机制容错机制Lucene结构原理Lucene索引实现DocValues关于ES索引与检索分片运行原理解析倒排索引说明检索倒排索引分词器Analyzer建立索引和类型分片内文档写入流程场景多个分片的文档写入场景确定文档存储位置同步副
转载
2023-11-15 22:28:33
92阅读
文章目录一，redis的简介二，redis架构三，redis数据持久化两种方式：RDB和AOF 一，redis的简介Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的APIredis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链
转载
2023-08-11 10:13:52
147阅读
文章目录LNMP架构简介1.LNMP架构的基本定义2.LNMP架构的深层剖析LAMP架构解析apache主要实现如下功能mysql主要实现如下功能php主要实现如下功能LAMP和LNMP的区别 LAMP=Linux+Apache+Mysql+PHP LNMP=Linux+Nginx+Mysql+PHPLNMP架构简介1.LNMP架构的基本定义2.LNMP架构的深层剖析NGinx是一款高性能的we
转载
2023-11-27 17:28:50
134阅读
一、为什么需要搭建主从架构？单机的redis吞吐量不高，几乎不太可能做到QPS超过10万+。在实际开发中，需要主从架构通过读写分离，实现高并发。一般来说，对于缓存，写的请求是比较少的，可能写请求也就一秒钟几千，大量的请求都是读，一秒钟几万次读。二、主从架构的核心原理（1）当启动一个slave node的时候，它会发送一个PSYNC命令给master node。（2）如果这是slave node重新
转载
2023-09-01 23:21:38
70阅读
了解MySQL（超详细的MySQL工作原理 体系结构） 1.MySQL体系结构2.MySQL内存结构3.MySQL文件结构4.innodb体系结构一、了解MySQL前你需要知道的 引擎是什么:MySQL中的数据用各种不同的技术存储在文件(或者内存)中。这些技术中的每一种技术都使用不同的存储机制、索引技巧、锁定水平并且最终提供广泛的不同的功能和能力。通过选择不同的技术，你能够获得额外的速度或者功能，
转载
2023-09-04 13:19:10
48阅读
系统只要能从数据库连接池获取到一个数据库连接，就能执行CRUD。可通过数据库连接将待执行SQL发给MySQL。大部分 crud boy只知道：执行insert语句后，在表里会多条数据执行update后，会更改表数据执行delete后，会删除表里数据执行select后，会查询表里数据出来要是SQL性能丢人，建几个索引解决…这应该是目前行业内很多工程师对数据库的一个认知，完全当他是个黑盒来建表及执行SQL。网络连接必须有线程处理假设数据库服务器的连接池中的某个连接，接收到一条SQL网络请
原创
2022-03-14 11:38:33
233阅读
第1节 集群架构设计1.1 架构设计理念在集群架构设计时，主要遵从下面三个维度：可用性扩展性一致性1.2 可用性设计站点高可用，冗余站点服务高可用，冗余服务数据高可用，冗余数据保证高可用的方法是冗余。但是数据冗余带来的问题是数据一致性问题。实现高可用的方案有以下几种架构模式：主从模式 简单灵活，能满足多种需求。比较主流的用法，但是写操作高可用需要自行处理。双主模式 互为主从，有双主双写、双主单写两
转载
2023-09-11 21:58:38
9阅读
RocketMQ 是一个 队列模型 的消息中间件，具有高性能、高可靠、高实时、分布式 的特点。 基本概念核心组成RocketMQ的四大核心组成部分：NameServer、Broker、Producer以及Consumer名字服务 NameServer作为注册中心，主要负责对于源数据的管理，提供Broker管理以及路由信息管理。名称服务充当路由消息的提供者。生产者或消费者能够通过名字服务查找各主题相
目录一、什么是PyQt二、应用和窗口1. QApplication2. QWidget三、PyCharm安装外部工具Qt designer和pyuic1. QT Designer2. pyuic一、什么是PyQtQT是一个跨平台C++图形用户界面应用程序开发框架。PyQt是QT的一组python绑定，是RiverBank（PyQt的开发商）使用SIP方案实现的。PyQt的底层都是C/C++，所以P
转载
2023-10-15 21:41:45
497阅读
企业的集团电话系统有其自己的布线体系及方法，PBX交换机是整个系统的中心设备，所有的内部分机或接入系统的外线电话线都要经过PBX交换机进行转接、接续，交换等，因此每一部分机或接入系统的外线到集团电话都要有一条物理线路与其链接，类似局域网的网络布线。遵循国际标准布线系统，电话系统的布线大概可分为垂直布线和水平布线等，垂直布线主要使用大对数电缆链接各个楼层，水平布线使用普通电话线链接到各房间分机。&l
