ES里有一个叫做gateway的东西，今天抽空理一下，前面翻译ES的一篇博文叫做“搜索引擎与时间机器”，既然里面谈到了时间机器，就免不了需要穿越时空的的门咯，I guess，也许gateway这名字就是这么来的，其实在ES里面，gateway的主要职责是用来对数据进行长持久化(持久化了之后加上版本信息，不就可以自由的往还于过去未来之间了吗？)，另外，整个集群重启之后可以通过gateway重新恢复
转载
2024-02-29 09:42:12
14阅读
块存储典型设备：磁盘阵列，硬盘块存储主要是将裸磁盘空间整个映射给主机使用的，例如磁盘阵列里面有5块硬盘（为方便说明，假设每个硬盘1G），然后可以通过划逻辑盘、做Raid、或者LVM（逻辑卷）等种种方式逻辑划分出N个逻辑的硬盘。假设划分完的逻辑盘也是5个，每个也是1G，但是这5个1G的逻辑盘已经与原来的5个物理硬盘意义完全不同了。例如第一个逻辑硬盘A里面，可能第一个200M是来自物理硬盘1，第二个2
转载
2019-10-04 08:14:00
1462阅读
2评论
Fibre Channnel我们之前引入了SAN的概念，SAN首先是个网络，而不是存储设备。这个网络是专门来给主机连接存储设备用的。我们知道按照SCSI总线16个节点的限制，不可能接入很多的磁盘，要扩大SAN的规模，只使用SCSI总线是不行的，所以必须找到一种可寻址容量大、稳定性强、速度块、传输距离远的网络结构。FC网络就应运而生。FC网络Fibre Channnel也就是网状通道，FC协议从19
转载
2024-07-29 17:43:45
345阅读
《C++ Primer Plus》第五版 P107~P108自动存储在函数内部定义的常规变量使用自动是整个程序执行期间都存在的存储方式。使变量成为静态的方
原创
2023-06-13 10:22:05
353阅读
上一篇介绍了传统存储的几个常用类型，本篇主要介绍云平台用到的常用存储类型，分别是文件存储、块存储和对象存储。这种分类是以数据存储的方式来命名的，体现了不同的数据存储格式。文件存储会以文件和文件夹的层次结构来整理和呈现数据；块存储会将数据拆分到任意划分且大小相同的卷中; 对象存储会管理数据并将其链接至关联的元数据。1. 数据存储基础块级概念：块级是以扇区为基础，一个或者多个连续的扇区组成一个块，也叫
转载
2023-08-25 22:53:50
443阅读
-- copy from Internet NameNode：是Master节点，有点类似Linux里的根目录。管理数据块映射；处理客户端的读写请求；配置副本策略；管理HDFS的名称空间；SecondaryNameNode：保存着NameNode的部分信息（不是全部信息NameNode宕掉之后恢复数据用），是NameNode的冷备份；合并fsimage和edits然后再发给n
转载
2024-09-05 12:44:17
93阅读
【块存储】典型设备：磁盘阵列，硬盘块存储主要是将裸磁盘空间整个映射给主机使用的，就是说例如磁盘阵列里面有5块硬盘（为方便说明，假设每个硬盘1G），然后可以通过划逻辑盘、做Raid、或者LVM（逻辑卷）等种种方式逻辑划分出N个逻辑的硬盘。（假设划分完的逻辑盘也是5个，每个也是1G，但是这5个1G的逻辑盘已经于原来的5个物理硬盘意义完全不同了。例如第一个逻辑硬盘A里面，可能第一个200M是来自物理硬盘...
转载
2016-07-26 21:06:00
689阅读
2评论
OZone背景及定位OZone是当前Apache Hadoop生态圈的一款新的对象存储系统，可用于小文件和大文件存储，设计的目的是为了填充社区在对象存储方面的不足，同时能够提供百亿甚至千亿级文件规模的存储。OZone与HDFS有着很深的关系，在设计上也对HDFS存在的不足做了很多改进，使用HDFS的生态系统可以无缝切换到OZone。OZone架构OZone无论从设计上还是实现上都从HDFS继承了很
转载
2023-10-06 21:12:04
203阅读
本作品采用知识共享署名-非商业性使用-相同方式共享 4.0 国际许可协议进行许可。本作品 (李兆龙 博文, 由 李兆龙 创作)
原创
2022-07-12 14:40:32
962阅读
点赞
# OpenStack 存储服务入门指南
OpenStack 是一个开源的云计算管理平台，其中包括多个组件，用于管理黑客和基于云的资源。块存储、文件存储和对象存储是 OpenStack 中的重要部分。本文将指导你如何实现这三种存储类型。
## 整体流程概述
下面是实现 OpenStack 块存储、文件存储和对象存储的流程步骤：
| 步骤 | 说明
原创
2024-08-24 04:22:49
200阅读
给出关键代码 public void save(View view) { //获取Editor SharedPreferences.Editor editor = sp.edit(); //获取key和value String key = keyTextView.getText().toString
转载
2021-02-07 21:01:00
1014阅读
2评论
Web存储—localStorage存储一、 localStorage存储特点：特点：本地存储数据的不需要网络、大
原创
2022-07-01 12:23:24
314阅读
链式存储于顺序存储的区别数据的存储方式一般有两种（这里我们说的存储是指存在内存中）：链式存储和顺序存储。接下来解析两者的区别顺序存储顺序存储是指在内存中开辟连续的存储空间来存放数据，比较有代表性的就是数组以及ArrayList集合这种结构的存储方式都是使用的顺序存储来存储元素对象的；而ArrayList的底层也是通过数组来存储数据元素的，所以我们可以通过数组来观察顺序存储的优缺点。优点：查询、遍历
前言回顾上一篇《AI 场景的存储优化之路》中，我们分析了AI场景中分布式文件存储面临三大挑战：海量文件、小文件访问性能、目录热点，其中对目录热点问题做了详细分析，并介绍了YRCloudFile在该问题上的方案实现。而文中提到的元数据的静态子树、动态子树、目录hash三种分布模式，抽象出来，大致对应集中式、分布式、无元数据三种架构模型，这三种模型是业界通用的元数据管理方式，在特定业务场景中，各有所长
转载
2024-05-04 18:27:23
72阅读
基础知识之硬盘硬盘机械硬盘机械硬盘工作原理机械硬盘组成部件：硬盘的接口类型：固态硬盘 硬盘硬盘类型：机械硬盘(又称传统硬盘，HHD， 采用磁性碟片来存储)、固态硬盘(SSD，采用闪存颗粒来存储)机械硬盘机械硬盘介绍：机械硬盘(Hard Disk Drive，缩写：HDD)：是电脑上使用坚硬的旋转盘片为基础的非易失性存储器（指当电流关掉后，所存储的资料不会消失的资料存储设备。），它在平整的磁性表面
转载
2024-05-14 20:07:51
333阅读
随着存储领域的发展，有很多不同的存储介质，今天ICMAX就带大家来分一分emmc、Nand flash、Nor flash之间的区别。一、定义及区别emmc：全称为embeded MultiMedia Card，是一种嵌入式非易失性存储器系统，由Nand flash和Nand flash控制器组成，以BGA方式封装在一款chip上。Nand flash：一种存储数据介质；若要读取其中的数据，需要外
转载
2024-04-19 15:26:51
81阅读
Web存储—sessionStorage存储sessionStorage存储特点：不需要网络 大小5M 会话存
原创
2022-07-04 09:15:35
253阅读
在Kubernetes (K8S) 中，云存储和本地存储是非常重要的概念。云存储指的是将数据存储在云端服务商提供的存储空间中，而本地存储则指的是将数据存储在集群节点上的本地磁盘上。在实际的应用场景中，我们经常需要在K8S集群中使用这两种存储方式，以满足不同的需求。
下面来详细介绍如何在K8S中实现云存储和本地存储，并给出相应的代码示例：
### 云存储
#### 流程如下：
| 步骤 | 操
原创
2024-05-17 11:08:35
137阅读
在这篇博客中，小编要来讲讲SAN的原理以及实现啦，读者应该还记得小编在前面在讲HA和LB群集的时候解决后端的存储用的技术是什么么，NAS（网络附加存储），当然这种技术的效率是比较低的啦，如果企业对于数据存储的速率要求比较高的话，这种技术果断不能满足需求啦，因此就引出了SAN（存储区域网络）啦，简单的说它提供一种块级别的文件共享，前方服务器直接可以将后方存储介质当做本地磁盘来使用啦，人们采用包括光纤
对于企业和数据中心的服务器而言，将数据中的错误降至最低是关键任务，这就是 ECC（纠错码）内存的目的。ECC 是一种检测并纠正单位内存错误的方法。单位内存错误是服务器输出或生产中的数据错误，错误的存在会对服务器性能产生很大影响。有两种类型的单位内存错误：硬错误和软错误。硬错误硬错误是由物理因素引起的，例如温度变化过大、电压应力或对内存位带来的物理应力。软错误当数据写入或读取与最初预期不同
转载
2024-06-13 17:44:54
126阅读
