网络协议：TCP/IP 和 UDP/IPTCP/IP（Transmission Control Protocol/Internet Protocol）是一种可靠的网络数据传输控制协议。定义了主机如何连入因特网以及数据如何在他们之间传输的标准。TCP/IP协议参考模型把所有TCP/IP系列协议归类到四个抽象层中； 每一个抽象层建立在低一层提供的服务上，并且为高一层提供服务 三次握
分布式协议中最重要的两个协议： 两阶段提交 paxos============================================================================================= 两阶段提交协议两阶段提交一般有两类节点 一协调者 二事务的参与者（一般有多个事务参与者），事务参与者完成系统相关业务成功
转载
2023-10-20 19:18:17
52阅读
什么是zookeeper 1.Zookeeper是一个分布式开源框架，提供了协调分布式应用的基本服务，它向外部应用暴露一组通用服务——分布式同步、命名服务、集群维护等，简化分布式应用协调及其管理的难度，提供高性能的分布式服务。ZooKeeper本身可以以单机模式安装运行，不过它的长处在于通过分布式ZooKeeper集群，基于一定的策略来保证ZooKeeper集群的稳定性和可用性，从而实现
转载
2024-10-06 14:26:01
133阅读
分布式的体系架构总结1、什么是分布式应用架构？简单的说就是将一个业务拆分成多个子业务，部署在不同的服务器上。（集群：同一个业务，部署在多个服务器上。）2、为什么要使用分布式应用架构？在单一应用架构中，随着业务需求的增加，架构随之变得也越来越复杂，因而系统的拆分成为不可避免的事情，由此演变为垂直应用架构。垂直应用架构解决了单一架构的扩容问题，但是当垂直架构增多时，应用之间的交互，相互调用则不可避免。
转载
2023-07-09 13:01:40
171阅读
最近几年，我们一直在谈论各式各样的架构，如高并发架构、异地多活架构、容器化架构、微服务架构、高可用架构、弹性化架构等。还有和这些架构相关的管理型的技术方法，如 DevOps、应用监控、自动化运维、SOA 服务治理、去 IOE 等。面对这么多纷乱的技术，很多团队或是公司都是一个一个地去做这些技术，非常辛苦，也非常累。这样的做法就像我们在撑开一张网里面一个一个的网眼。其实，只要我们能够找到这张网的“纲
转载
2023-08-15 14:31:01
49阅读
第1章 概述1.1 分布式存储概念分布式存储系统的特性：可扩展低成本高性能易用 分布式存储系统的挑战：数据分布一致性容错负载均衡事务与并发控制易用性压缩/解压缩1.2 分布式存储分类非结构化数据，如办公文档、文本、图片、图像、音频、视频信息等。结构化数据，如关系数据库半结构化数据，如HTML文档 本书将分布式存储系统分为四类：分布式文件系统，存储图片、视频等非结构化数据对象，一
转载
2023-08-07 23:02:08
111阅读
1、分布式系统架构1.1基础概念分布式 ： 将一个单体项目分成很多个模块，各个模块协同工作，各个模块构成了分布式系统集群：针对单个模块或者单个系统在多台服务器上部署，称为集群。为了提高系统的可用性，增加系统的负载。1.2分布式系统演变  
转载
2023-07-18 11:23:40
314阅读
如题，目前，不管是包含Spark、Flink等分布式计算框架的大数据Hadoop生态圈，还是以SpringCloud为服务治理主体的微服务，还有炒得火热的区块链平台，都是分布式下的智慧结晶，那今天来说说在分布式系统下所能遇到的一系列经典的技术问题，程序员要保持学习，今天，把此技术问题做一个理论汇总，具体的解决方案，等本人亲自动手证明之后，再把成果做分享。分布式下所遇到的技术问题有如下几种：（1）分
转载
2023-07-06 13:27:32
45阅读
一、什么是分布式架构 分布式系统（distributed system） 是建立在网络之上的软件系统。 内聚性：是指每一个数据库分布节点高度自治，有本地的数据库管理系统。 透明性：是指每一个数据库分布节点对用户的应用来说都是透明的，看不出是本地还是远程。 在分布式数据系统中，用户感觉不出数据是分布的，即用户不须知道关系是否分割，有无副本，数据存在于那个站点以及事物在哪个站点上
转载
2023-09-22 11:09:52
63阅读
1.什么是分布式系统 通俗点说：就是能把系统进行拆分并部署到多台服务器上的系统。(注意区分分层和集群) 专业点说：分布式软件系统(Distributed Software Systems)是支持分布式处理的软件系统，是在由网络互联的多处理机体系结构上执行任务的系统。常见的有：分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统、分布式数据库系统、分布式应用系统等。2.为
转载
2023-08-10 20:40:38
123阅读
XA规范 在谈到 XA 规范之前，必须首先了解分布式事务处理（ Distributed Transaction Processing ， DTP ）的概念。 Transaction ，即事务，又称之为交易，指一个程序或程序段，在一个或多个资源如数据库或文件上为完成某些功能的执行过程的集合。 分布式事务处理是指一个事务可能涉及多个数据库操作，分布式事务处理的关键是必须有一种方法可以知道事务在任
转载
2023-07-30 09:17:14
111阅读
分布式存储体系架构的形式，包括多种方案和实现方式。随着数据量的持续增长，传统存储手段已无法满足性能和扩展性需求，因此，分布式存储成为当前应用场景的重要解法。本文将详细探讨分布式存储的各类体系架构形式，采用不同的模型分析和实例展示，供读者深入理解。
**背景描述**
分布式存储是一种将数据分散存储在多个节点上的技术。这种体系架构的优势在于能够实现高可用性、可扩展性和容错性。传统单体存储的缺点在于
实际上，信息化建设过程是一个业务与IT互为条件、互相驱动和双向融合的过程。有了业务上解决难题的需求，IT才有立足之本，IT技术的出现以及IT应用能力的提高，才能推动关键业务能力达到以往无法达到的高度和水准，而业务在与IT在双向融合中，能够创造出各种全新的管理思路、管理方法，能够有效提高人均劳动生产率，全面提高精益化管理水准。传统制造业的关键业务能力，主要有产品营销能力、产品开发能力以及横跨整个供需
转载
2023-10-25 20:57:08
106阅读
系统架构的发展 （1）单一应用架构。一个单体应用部署在一个服务器上。当流量越来越大的时候，可以将同一个应用部署到多台服务器上，然后进行负载均衡。 （2）分布式架构。将应用按照业务逻辑拆分成各个模块，各个模块部署在不同的服务器上，各个模块通过API互相调用服务。当服务越来越多的时候，此时用于提升服务质量的服务治理中心是关键。什么是分布式 分布式就是利用物理架构由多个自治处理元素，自治之间不共享内存，
转载
2024-06-09 18:30:47
39阅读
无论是云计算、大数据还是互联网公司的各种应用，其后台基础设施的主要目标都是构建低成本、高性能、可扩展、易用的分布式存储系统。大规模分布式存储系统的定义如下：分布式存储系统是大量普通PC服务器通过Internet互联，对外作为一个整体提供存储服务。几个特点：（1）可扩展：分布式存储系统可以扩展到几百台甚至上千台的集群规模，而且，随着集群规模的增长，系统整体性能表现为线性增长（2）低成本：自动容错、自
转载
2023-12-27 13:10:06
199阅读
一般来说单个爬虫的性能有限，不能再合理的时间范围内抓取到足够数目的相关网页。所以在实际的应用中一般做法是设计一个分布式的爬虫，让每个爬虫节点就近抓取靠近他的网站，然后把结构进行整合反馈给用户。分布式技术应用于网络爬虫中，不仅可以降低运营的成本，而且能够大幅度提高爬虫的性能。尤其是在当今云计算正处于飞速发展时期，更是带动了分布式技术的发展。所谓分布式技术其实质上是一种基于网络的计算机处理技术。一个分
转载
2023-08-10 01:00:37
66阅读
作者：李勤阿里巴巴达摩院人工智能实验室首席科学家王刚（右）一向低调的阿里巴巴自动驾驶项目首次披露了技术进展。9月6日，阿里巴巴集团与交通部公路科学研究院宣布，成立车路协同联合实验室，基于车路协同探索自动驾驶和道路智能化的解决方案。阿里巴巴达摩院的自动驾驶项目负责人王刚表示，阿里将推出智能感知基站，利用感知基站的远程感知能力和基础设施属性，提升自动驾驶车的感知能力，并降低成本。据悉，阿里巴巴达摩院下
转载
2024-01-20 22:23:41
69阅读
1.问题1、何为分布式何为微服务？2、为什么需要分布式？3、分布式核心理论基础，节点、网络、时间、顺序，一致性？4、分布式是系统有哪些设计模式？5、分布式有哪些类型？6、如何实现分布式？2.关键词节点，时间，一致性，CAP，ACID，BASE，P2P，机器伸缩，网络变更，负载均衡，限流，鉴权，服务发现，服务编排，降级，熔断，幂等，分库分表，分片分区，自动运维，容错处理，全栈监控，故障恢复，性能调优
转载
2021-03-28 10:28:04
143阅读
https://mp.weixin.qq.com/s/9xINMH9tJlmsjH6QdUPFxQ1.问题 1、何为分布式何为微服务？ 2、为什么需要分布式？ 3、分布式核心理论基础，节点、网络、时间、顺序，一致性？ 4、分布式是系统有哪些设计模式？ 5、分布式有哪些类型？ 6、如何实现分布式？ 2.关键词节点，时间，一致性，CA...
转载
2021-07-17 16:52:12
154阅读
"
中间层
"
，也叫组件层。
三层体系的应用程序将业务规则、数据访问、合法性校验等工作放到了中间层进行处理。
开发人员可以将应用的商业逻辑放在中间层应用服务器上，把应用的业务逻辑与用户界面分开。在保证客户端功能的前提下，为用户提供一个简洁的界面。这意味着如果需要修改应用程序代码，只需要对中间层应用服务器进行修改，而不用修改成千上万的客户端应用程序。从而使开发人员可以专注于应用
