分层和分割的主要目的是为了分割后的模块便于分布式部署(即将不同的模块部署在不同的服务器上，通过远程调用协同工作)；分布式作用：分布式意味着可以使用更多的计算机完成相同的功能，计算机越多cpu,内存，存储资源也就越多，能够处理的并发访问和数据量也就越大，进而能够为更多的用户提供服务。 分布式方案的种类：分布式应用和服务，分布式静态资源，分布式数据和存储，分布式计算，分布式配置，分布式文件。集群：多台
转载
2024-08-17 09:07:47
12阅读
兰伯特有很多关于分布式的理论，这些理论都很经典（比如拜占庭将军 问题、Paxos），但也因为太早了，与实际场景结合的不多，所以后续的众多算法是在这个 基础之上做了大量的改进（比如Raft 等）两种分布式共识问题是否存在伪造或者篡改的恶意行为。忠诚的将军，正常运行的计算机节点；叛变的将军，出现故障并会发送误导信息的计算机节点；信使被杀，通讯故障、信息丢失；信使被间谍替换，通讯被中间人攻击，攻击者在恶
我们知道，议会选举中的领导者是有任期的，领导者任命到期后，要重新开会再次选举。Raft 算法中的领导者也是有任期的，每个
在分布式系统中，最重要的事就是如何选择或设计最合适的算法，解决一致性和可用性相关问题。Raft 适合性能要求不高的强一致性场景。重试、幂等、异步、负载均衡、故障隔离、流量切换、自动扩缩容、熔断、限流、降级、容量规划拜占庭将军问题讨论了分布式共识问题，分布式领域最复杂的容错模型。假设 ABC 三个将军同时率军攻打一个目标，他们分布在不同区域，只能通过信使联系，且有半数军力一起进攻才能取胜。这时有一个
转载
2024-01-06 22:23:37
119阅读
分布式理论与协议概念分类分布式的CAP理论CAP不可能三角使用CAP理论ACID理论：追求一致性（分布式事务协议）二阶段提交协议和TCC（Try-Confirm-Cancle）二阶段提交协议TCC协议BASE理论：追求可用性核心实现基本可用的四板斧BASE理论的核心：最终一致性实现最终一致性的解决方案BASE理论小结分布式协议算法Paxos算法(在多个节点确定变量的值)Paxos包含两个部分Ba
转载
2024-03-02 09:57:27
39阅读
起源Gossip protocol 也叫 Epidemic Protocol （流行病协议）。Gossip protocol 在 1987 年 8 月由施乐-帕洛阿尔托研究中心发表 ACM 上的论文 《Epidemic Algorithms for Replicated Database Maintenance》 中被提出。原本用于分布式数据库中节点同步数据使用，后被广泛用于数据库复制、信息扩散、
转载
2022-03-08 10:21:36
526阅读
关于一致性协议, 分布式锁以及如何使用分布式锁最近看antirez 和 Martin 关于redlock 的分布式锁是否安全的问题的争吵, 非常有意思http://martin.kleppmann.com/2016/02/08/how-to-do-distributed-locking.htmlhttp://antirez.com/news/101https://news.ycombinator.
原创
2021-03-04 23:47:23
149阅读
随着计算机系统规模变得越来越大，将所有的业务单元集中部署在一个或若干个大型机上的体系结构，已经越来越不能满足当今计算机系统，尤其是大型互联网系统的快速发展，各种灵活多变的系统架构模型层出不穷。布式的处理方式越来越受到业界的青睐——计算机系统正在经历一场前所未有的从集中式向分布式架构的变革。集中式与分布式集中式系统所谓的集中式系统就是指由一台或多台主计算机组成中心节点，数据集中存储于这个中心节点中，
转载
2023-06-30 14:24:06
278阅读
由于工作的原因，近两年多的时间开始接触分布式系统，在学习分布式系统之前，我认为的分布式仅仅就是把系统模块化独立部署，模块化之间采用webservice等可远程调用的方法进行连接，共同协助完成一个实际的业务流程，当然了，分离带来的部署复杂度也增加了，但是毕竟是分布式系统架构，这个缺点还是可以接受的，类似这样的概念，在我的潜意识中存在的很多年
转载
2023-10-07 19:49:20
156阅读
RAFT是一个通俗易懂，更容易落地的分布式协议。分布式协议一般都比较难懂，但是看了几个协议之后发现画PPT是理解一个协议比较好的办法，如果喜欢欢迎转发，后续会补充其他协议的PPT。节点的状态每个节点有三个状态，他们会在这三个状态之间进行变换。客户端只能从主节点写数据，从节点里读数据。选主流程初始是Follwer状态节点，等100-300MS没有收到LEADER节点的心跳就变候选人。候选人给大家发
转载
2024-02-19 13:06:03
50阅读
2PC是一种阻塞协议，确保所有参与者在事务中要么都提交，要么都回滚。： 将长事务拆分为多个小事务，每个小事
原创
2024-10-16 16:52:15
27阅读
微服务架构是分布式系统架构中的一种
原创
2022-12-13 10:28:14
445阅读
1、概述根据CAP（一致性、可用性、可靠性）的理论，鱼和熊掌不可兼得，P是必须要的，所以需要在C和A之间做平衡，实际上在互联网领域Ａ也是必须的，因此就不得不在Ｃ上做文章。于是有了弱一致或者最终一致，它不要求你在做完一个操作后能立马看到效果，只要在可接受的时间内看到正确的结果即可。解决分布式事务的思路就是避免分布式事务，具体来说就是利用本地事务+异步消息+重试+幂等去保证整个系统数据的最终一致性。
转载
2024-06-27 07:35:10
75阅读
一、前言 在大数据系统中，分布式系统已经成为一个无法避免的组件，如zookeeper已经成为了工业届的标准。所以对于大数据的研究，也必须要研究分布式系统的特点。二、集中式系统 由一台或多台计算机组成的中心节点，数据集中存储在这个中心节点中，并且整个系统的所有业务单元都集中部署在这个中心节点上，系统的所有功能均由其集中处理。其部署简单，不用考虑多个节点间的分布式协作问题。三、分布式系统 分布式
转载
2023-08-15 17:54:14
112阅读
[源码分析]Dynomite 分布式存储引擎 之 DynoJedisClient(1) 文章目录[源码分析]Dynomite 分布式存储引擎 之 DynoJedisClient(1)0x00 摘要0x01 背景概念1.1 Amazon Dynamo1.2 NetFlix Dynomite0x02 Netflix选型思路0x03 基础知识3.1 Data Center3.2 Rack3.2 Ring
转载
2023-10-07 18:56:56
172阅读
前言现在的架构很多，各种各样的，如高并发架构、异地多活架构、容器化架构、微服务架构、高可用架构、弹性化架构等，还有和这些架构相关的管理型的技术方法，如 DevOps、应用监控、自动化运维、SOA 服务治理、去 IOE 等等，还有很多。那什么是分布式系统？分布式系统是支持分布式处理的软件系统，是由通信网络互联的多处理机体系结构上执行任务的系统。包括分布式操作系统、分布式程序设计语言及其编译系统、分布
转载
2023-07-10 16:35:38
129阅读
1.架构的分类架构一般可以分为技术架构，应用架构，业务架构: 1.业务架构从概念层帮助开发人员更好的理解系统。 2. 应用架构从逻辑层面帮助开发落地系统，如数据交互关系、应用形式、交互方式，是的整 个系统逻辑上更容易理解，步入大家熟知的SOA就属于应用架构的范畴 。 3.技术架构主要解决技术平台选型、如操作系统、中间件、设备、多机房、水平扩展、高可 用等问题。2.大型架构的网站演进2.1 电商案例
转载
2023-09-07 19:12:25
195阅读
亚马逊经验分布式服务化架构思想实践最早的公司应该是亚马逊。因为早在 2002 年的时候，亚马逊 CEO 杰夫·贝索斯（Jeff Bezos）就向全公司颁布了几条架构规定。STEVEY对AMAZON和GOOGLE平台的吐槽亚马逊这么多年的实践让其可以运维和管理极其复杂的分布式服务架构。 1、分布式服务的架构需要分布式的团队架构。 2、分布式服务查错不容易。 一旦出现比较严重的故障，需要整体查错。 3
转载
2023-11-20 01:04:39
88阅读
万法皆空，因果不空。随着摩尔定律碰到瓶颈，分布式架构越来越常见。从单点演变到分布式结构，首要问题之一就是数据一致性。很显然，如果分布式集群中多个节点处理结果无法保证一致，那么在其上的业务系统将无法正常工作。区块链系统是一个典型的分布式系统，必然也会碰到这些经典问题。本章将介绍分布式系统领域的核心技术，包括一致性、共识的定义，基本的原理和常见算法，最后还介绍了评估分布式系统可靠性的指标。一致性问题一
转载
2024-01-25 19:25:54
118阅读
一、分布式主流架构模型–SOA架构/微服务架构1.SOA架构（服务治理）：Service Oriented Architecture （面向服务的架构），是一种设计方法，服务之间通过相互依赖最终提供一系列的功能，一个服务通常以独立的形式村杂鱼操作系统进程中。各个服务之间通过网络调用。通常服务之间互相调用关系复杂， ESB（企业服务总线）来治理 SOA所解决的核心问题： 1、系统集成 （有序） 2、
转载
2023-10-07 18:46:09
188阅读
