1.分布式应用的概念和优势 分布式数据库是指利用高速网络将物理上分散的多个数据存储单元连接起来组成一个逻辑上统一的数据库。分布式数据库的基本思想是将原来集中式数据库中的数据分散存储到多个通过网络连接的数据存储节点上，以获得更大的存储容量和更高的并发访问量。近年来，随着数据量的增长，分布式数据库技术也得到了快速的发展，传统的关系型数据库开始从集中式模型向分布式存储，从集中式计算走向分布式
转载
2024-07-03 22:08:12
190阅读
小故事网友大喝：标题竟敢胡言乱语？MySQL作为全世界最流行的数据库，30余年历史，怎么可能一无是处?ChatGPT回答说：哈哈，你说得对！MySQL作为全世界最流行的数据库，确实有着令人难以忽视的历史和优势。就像一位老资格的数据库大佬一样，它在数据存储和管理方面功力深厚，让数据如鱼得水。但是，有时候也会有一些小插曲，就像人类一样，有时候也会犯点小错误。不过，这只能证明MySQL也是有
目标数据存储资源是系统中最重要的组成部分，数据即一切，尤其分布式领域，主要关注以下几点：高可用性，当遇到网络或者系统故障时，系统仍然保持可用高扩展，当数据规模变大时，数据存储系统能够自动适应这种变化高性能，当数据规模和访问规模变大时，性能不受大的影响成本，通过成本反映出系统设计是合理的安全，遇到各种系统和人为故障时，数据不丢失MySQLMySQL是OLTP关系型数据库，支持ACID事务，是最主要的
转载
2024-06-16 19:55:47
62阅读
大数据基础 1.什么是大数据 短时间内快速的产生海量的多种多样的有价值的数据 2.大数据技术 2.1 分布式存储 2.2 分布式计算 ① 分布式批处理（无法实现预测） 存一段时间的数据，等到将来某一时刻时再进行处理 ② 分布式流处理（实时处理）（无法实现预测） 数据不需要攒，直接处理，每产生一条数据，立马对这条数据进行处理。 2.3 机器学习 可以实现预测 3.分布式存储原理 3.1主要概念：元数
转载
2023-12-06 23:25:30
108阅读
「后端分布式」包括「分布式存储」和 「分布式计算」两大类。结合实际工作中碰到的问题，以寻找答案的方式来剖解技术，很多时候我们都不是在创造新技术，而是在应用技术。为了更有效率与效果的用好技术，我们需要了解一些技术的原理与工作方式。带着问题从使用者的角度去剖析技术原理，并将开源技术产品和框架作为一类技术的参考实现来讲解。以讲清原理为主要目的，对于具体实现的技术细节若无特别之处则尽可能点到即止。事务与复
转载
2023-08-15 10:00:28
125阅读
10、分布式锁使用mysql实现是的，MySQL可以用于实现分布式锁。虽然MySQL是一个关系型数据库，主要用于存储和管理数据，但它也可以用于实现简单的分布式锁机制。一种常见的方法是使用MySQL的行级锁和事务机制。具体步骤如下：创建一个专门用于存储锁信息的表，通常包含以下字段：锁名称、锁持有者、锁创建时间等。在获取锁时，通过执行INSERT语句向锁表中插入一条记录。由于MySQL的行级锁机制，只
转载
2023-08-10 13:17:05
166阅读
分布式mysql数据库使用单master多slave的架构。通过master和slave的replication，让应用程序服务器通过负载均衡器去查询slave。这样就能将查询分散到多台服务器上。
此时，应用程序实现上应当只把select等读取类的查询发送给负载均衡器，而更新查询应当直接发给master。要是在slave上执行更新查询，slave和master的内容就无法
转载
2023-06-30 19:40:25
92阅读
概述集群和分布式概念集群概念：将多台服务器集中在一起，处理相同的业务；具有可扩展性、高可用性。 狭义集群概念就是多台服务器聚集在一起，每个服务器都处理相同的业务。 广义集群概念就是多台服务器聚集在一起，服务器可能处理相同的业务和不同的业务。 集群可能是分布式与非分布式的。 分布式概念：不同的业务分布在不同的节点，每个节点都可以使用集群处理。 分布式窄意上讲和集群相似，组织比较松散，不像集群那样有组
转载
2023-08-07 20:01:48
157阅读
对象存储是一种存储数据的方式，它与传统的文件存储、数据库存储等有所区别，对象存储以对象为基本存储单元，每个对象都包含数据、元数据和一个全局唯一的标识符。在Kubernetes（简称K8S）中，我们可以通过使用对象存储来实现分布式存储，以满足大规模分布式应用程序的存储需求。
下面我将详细介绍如何在K8S中实现对象存储作为分布式存储，并附上代码示例。
### 流程概览
首先让我们通过表格展示整
原创
2024-05-22 10:34:39
86阅读
关于云计算，怎么都绕不开存储。如果说数据存储是数字经济发展的数字底座，那么分布式存储就是底座中的基石，不可或缺。什么是分布式存储？分布式存储，是指将具体的存储设备或存储系统同服务器操作系统分隔开来，为存储用户提供统一的虚拟存储池，通俗理解就是对存储硬件资源进行抽象化。打个比方，就像去仓库存放或者提取物品一样，只要和仓库管理员沟通即可，不用关心物品到底存放在仓库的哪个角落。对于用户来说，虚拟化的存储
转载
2023-08-26 16:25:47
29阅读
差异点\产品ServerSAN分布式NAS分布式对象存储接口协议块（SCSI协议）文件（NFS、CIFS协议）对象（OpenStack SWIFT、Amazon S3）时延较低(<10ms左右)中(10ms~100ms)高（60ms以上）一致性强一致性强一致性最终一致性应用场景分布式云平台、数据仓库、虚拟机；客户为企业客户文件共享，如媒资、医疗影像归档、卫星图片云服务，如Ama
转载
2024-10-17 11:46:33
66阅读
本文简单介绍一下MySQL集群的基本原理！一、什么是MySQL集群 MySQL集群是一个无共享的(shared-nothing)、分布式节点架构的存储方案，其目的是提供容错性和高性能。 数据更新使用读已提交隔离级别（read-committedisolation)来保证所有节点数据的一致性，使用两阶段提交机制（two-ph
转载
2023-06-07 15:27:33
67阅读
在学习一个文件系统时，首先我先想到的是，学习它能为我们提供什么样的服务，它的价值在哪里，为什么要去学它。以这样的方式去理解它之后在日后的深入学习中才能够对它有一个更深层次的理解。
转载
2023-07-05 09:39:32
179阅读
分布式存储和集中式存储的区别1、集中存储的物理介质集中布放，而分布存储物理介质分布到不同的地理位置。2、集中存储对机房环境要求高，要求机房空间大，而分布存储是小容量设备分布部署，所以对机房环境要求低。分布式和集中式存储的选择集中存储的优缺点是，物理介质集中布放;视频流上传到中心对机房环境要求高，要求机房空间大，承重、空调等都是需要考虑的问题。分布存储，集中管理的优缺点是，物理介质分布到不同的地理位
转载
2023-08-04 12:43:53
78阅读
本文只是一个概念，具体配置太多，这里不做细节描述。 1、分布式应用的概念和优势 分布式数据库是指利用高速网络将物理上分散的多个数据存储单元连接起来组成一个逻辑上统一的数据库。分布式数据库的基本思想是将原来集中式数据库中的数据分散存储到多个通过网络连接的数据存储节点上，以获得更大的存储容量和更高的并发访问量。近年来，随着数据量的增长，分布式数据库技术也得到了快速的发展，传统的关系型数据库
转载
2023-06-29 18:18:48
89阅读
# Ceph分布式存储与MySQL分布式存储区别
## 简介
分布式存储是一种将数据分散存储在多个节点上的技术。Ceph和MySQL都是常见的分布式存储方案，但它们在设计和用途上有一些重要的区别。本文将比较Ceph分布式存储和MySQL分布式存储的特点、架构和使用场景，并提供代码示例以帮助读者更好地理解。
## Ceph分布式存储
Ceph是一个开源的分布式存储系统，提供可扩展性、高性能和
原创
2023-09-30 09:48:58
154阅读
文章目录前言一、什么是 MongoDB二、MongoDB 的特点三、MongoDB 的适用场景四、MongoDB 概念解析五、MongoDB 安装 前言 分布式文件系统（Distributed File System）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连。分布式文件系统的设计基于客户机/服务器模式。一个典型的网络可能包括多个供多用户访问的服务器
转载
2023-08-10 14:33:17
73阅读
一、HBase的安装模式 ①单机安装：不依赖于Hadoop的HDFS，配置完即可使用，好处是便于测试，坏处是不具备分布式数据存储的能力。 ②伪分布式安装：单台主机模拟真实环境。 ③完全分布式安装：多台主机（虚拟机）来搭建二、搭建准备 ①搭建Hadoop+JDK+ZooKeeper（3个zookeeper集群模式，博主其他博文中已安装-------zookeeper集群的搭建（3台虚拟机））
转载
2023-07-13 20:36:13
63阅读
Mysql分布式设计作用对数据备份, 实现高可用 HA (主要)通过读写分离, 提高吞吐量, 实现高性能原理Mysql的复制 是一个异步的复制过程过程本质为 Slave 从 Master 端获取 Binary Log, 然后再在自己身上完全顺序的执行日志中所记录的各种操作MySQL 复制的基本过程如下: 1）Slave 上面的 IO 线程连接上 Master， 并请求从指定日志文件的指定位置之后的
转载
2024-05-14 15:50:52
68阅读
分布式数据库概念分布式数据库是一种把数据分散存储在不同物理位置的数据库。计算层：单机数据库中的sql层，用来对数据访问进行权限检查、路由访问，以及对计算结果的操作。元数据层：记录了分布式数据库集群下有多少个存储节点，对应ip、端口等元数据信息是多少。当分布式数据库的计算层启动时，会先访问元数据层，获取所有集群信息，才能正确进行 SQL 的解析和路由等工作。另外，因为元数据信息存放在元数据层，那么分
转载
2023-08-02 09:53:54
172阅读
