存储分类1.本地文件系统 ntfs(wind)、ext2、ext3、ext4、xfs ext2不带日志,3和4带有日志:文件系统的日志作用(防止机器突然断电):所有的数据在给磁盘存数据之前会先给文件系统的日志里面存一份,防止机器突然断电之后数据没有存完,这样它还可以从日志里面重新将数据拷贝到磁盘。 2.网络文件系统----做远程共享
转载 2024-07-27 14:56:05
139阅读
一、介绍网络文件系统,英文Network File System(NFS),是一种基于TCP传输协议的文件共享习通。 NFS的CS体系中的服务端启用协议将文件共享到网络上,然后允许本地NFS客户端通过网络挂载服务端共享的文件。1、来源 2、特点 1、方便 2、资源占用少 3、使用率高输出 export二、NFS原理 当NFS服务器设置好一个共享目录,且设置好授权ip以及权限后,有访问权的客户
转载 2024-08-13 17:03:49
192阅读
NFS、GFS、Ceph这三种存储系统在当今互联网时代中发挥着非常重要的作用,它们都是用来提供分布式存储服务,但在性能方面有着各自的优势和劣势。本文将分别介绍这三种存储系统的性能特点。 首先,我们来看NFS(Network File System)。NFS是一种在计算机网络中实现文件共享的协议。它使用了分布式文件系统的概念,允许用户访问远程计算机上的文件就像访问本地文件一样。NFS的主要优势在于
原创 2024-03-20 09:54:38
171阅读
一次CephFS性能分析1. 背景2. 性能分析思路2.1. 理论值计算2.2. 实际操作下看能不能复现2.2.1. 性能分析关注点2.2.2. 开始分析2.2.2.1. ceph -s2.2.2.2. 查看mds服务2.2.2.3. 查看ceph osd perf2.2.2.4. 查看磁盘iostat2.2.2.5. 网络2.2.2.6. 客户端磁盘3. 总结1. 背景小明在使用文件系统的过程中
转载 2024-04-30 16:45:12
188阅读
前言最近在做Ceph性能测试相关工作,在测试初期由于没有得到理想的测试结果,因此对Ceph集群进行了优化,但是一直有个问题萦绕在我的脑海:基于当前硬件配置,这个Ceph集群的极限是多少?由于这个问题和Ceph的配置息息相关,为了简化问题,在本文中我们只会会讨论3个变量:冗余策略(纠删码、多副本),读/写,ObjectStore。我们将会基于磁盘、网络、CPU性能来估算出一个集群的性能,除此以外的参
转载 2024-04-19 09:55:09
118阅读
  一、iscsi设置 1. 服务器端 [1] Install administration tools. [root@dlp ~]# yum -y install scsi-target-utils [2] Configure iSCSI Target . For example, create a disk image under the [/iscsi_dis
主要内容概述常见存储方式Ceph 方式和特性Ceph 架构组成Ceph 网络模型Ceph 版本Ceph 部署方法介绍基于 Ceph-deploy 部署 Ceph扩展 Ceph 集群实现高可用1 存储基础1.1 传统存储传统的存储类型:DAS设备:直连存储SAS,SATA,SCSI,IDE,USB无论是那种接口,都是存储设备驱动下的磁盘设备,而磁盘设备其实就是一种存储,这种存储是直接接入到主板总线上
01 ceph中pool osds和crush算法之间的关系在 Ceph 存储系统中,理解 pool(存储池)、OSDs(对象存储设备)和 CRUSH 算法之间的关系,可以通过一个购物中心的比喻来解释。存储池 (Pools):想象 Ceph 中的存储池就像购物中心里的不同商店。每个商店(存储池)专门销售特定类型的商品(数据)。就像你可能去一家服装店购买衣服,或者去书店购买书籍一样,不同类型的数据被
在Kubernetes(K8S)中,我们经常会使用存储解决方案,其中比较常用的就是CephNFSCeph是一个开源的分布式存储系统,而NFS是一种网络文件系统,用于在网络上共享文件。在实际应用中,我们需要比较它们的性能,以便选择适合我们场景的存储解决方案。 首先,让我们一步步来看如何进行CephNFS性能对比: | 步骤 | 操作
原创 2024-05-28 10:34:02
202阅读
对一个分布式文件系统而言,有一些特性是必须要满足的,否则就无法有竞争力。这些特性概述如下:·应该符合 POSIX 的文件接口标准,使该系统易于使用。·数据一致性:只要客户数据写入成功,无论何时读,得到内容应该一致。·数据持久化:具有一定的安全机制,保证数据不会丢失。·可用性:保证系统部分模块异常时,总体仍能正常提供服务。·伸缩性:通常为可扩展性,当数据压力逐渐增长时能顺利动态扩容。同时,基于分布式
转载 2024-03-12 12:54:54
309阅读
ceph官方文档地址:https://docs.ceph.com/docs/master/start/intro/一、ceph提供的存储1、块存储      块存储主要是将裸磁盘空间整个映射给主机使用的,或在磁盘阵列上划分逻辑卷映射给给主机使用。2、文件存储      文件存储主要是为了克服块存储中文件服务共享的问题,所以有了文件存储。文
Ceph是一个广泛使用的开源分布式存储系统,它提供了高可用性、高可靠性和容错能力。其中的一种常见用法是结合NFS协议来提供分布式的文件共享服务。 NFS(Network File System)是一种在网络上共享文件系统的协议,它允许一个计算机系统像访问本地文件一样访问远程文件系统。结合CephNFS可以让用户在Ceph存储集群上方便地部署和管理NFS共享服务。 通过在Ceph存储集群上部署
原创 2024-03-15 09:43:19
93阅读
NFSCeph在红帽企业操作系统中的应用 在红帽企业操作系统中,NFS(Network File System)和Ceph是两个关键的技术,它们为用户提供了高效的文件共享和分布式存储解决方案。本文将重点介绍这两个技术的相关特性以及它们在红帽企业操作系统中的应用。 首先,我们来了解一下NFSNFS是一种分布式文件系统协议,它允许不同的计算机通过网络共享文件。NFS是红帽企业操作系统中常用的文
原创 2024-01-31 18:46:09
128阅读
目录简介应用NFS工作流程图NFS部署服务端客户端测试NFS文件同步功能NFS配置详解NFS部分参数案例rw,读写权限 (常用)ro,只读权限 (不常用)root_squash,当NFS客户端以root管理员访问时,映射为NFS服务器的匿名用户 (不常用)no_root_squash,当NFS客户端以root管理员访问时,映射为NFS服务器的root管理员 (不常用)all_squash,无论NF
转载 11月前
77阅读
ceph块存储设备手动部署指导Ceph和GPFS比较GPFS于1993年研发,1995年投入商用,适用于高性能计算和并行处理。之前都是共享存储,从3.5版本开始新增了FPO模式,采用Share Nothing架构,性能好历史悠久,支持AIX、LINUX、windows。CEPH从2010年加入LINUX版本,最初设计的RADOS是为其实现一个高性能的文件系统服务的,后来考虑支持块设备、对象存储,向
转载 2024-03-26 21:56:52
121阅读
      Ceph是呼声很高的开源分布式的SDS产品存储系统。同时提供对象存储、块存储和文件系统存储三种功能,满足不同应用需求。Ceph使用C++语言开发,遵循LGPL协议开源。Sage Weil(Ceph论文发表者)于2011年创立了以Inktank公司主导Ceph的开发和社区维护。2014年Redhat收购 inktank公司,并发布Inktank Ceph
转载 2024-08-28 22:32:44
143阅读
理解块存储、文件存储和对象存储的应用场景和选择应用场景分布式存储的应用场景相对于其存储接口,现在流行分为三种:对象存储: 也就是通常意义的键值存储,其接口就是简单的 GET、PUT、DEL 和其他扩展,如七牛、又拍、Swift、S3块存储: 这种接口通常以 QEMU Driver 或者 Kernel Module 的方式存在,这种接口需要实现 Linux 的 Block Device 的接口或者
转载 2024-06-05 21:56:41
95阅读
内容概括1、存储发展史随着Open Stack的快速发展,给Caph的发展注入了强心剂,越来越多的人使用Ceph作为Open Stack的底层共享存储,Ceph在中国的社区也蓬勃发展起来。近两年Open Stack火爆度不及当年,借助于云原生尤其是Kubernetes技术的发展,作为底层存储的基石,Ceph再次发力,为Kubernets有状态化业务提供了存储机制的实现。 企业中使用存储按照其功能,
转载 2024-05-31 13:38:31
310阅读
一、Ceph介绍       Ceph是一个Linux PB级分布式文件系统,能够在维护POSIX兼容性的同时加入了复制和容错功能。Ceph号称高可用的分布式存储系统,通过多个MON节点(通常为3个)维护集群的状态及元数据信息,而真正存储数据的OSD节点通过向MON节点汇报状态,并通过CRUSH算法将数据副本布局到相应OSD
**Ceph存储 SSD(固态)速度块,容量小 SATA(磁盘)速度慢,容量大 vim /usr/lib/systemd/system/ :存放配置文件的地方 存储的类型: DAS :(直连存储,硬盘和电脑直接一根线连起来)中间的线分为:ide线sata线 sas线 NAS :(网络附加存储) Samba ,nfs, ftp 文件系统(#格式化过的) SAN :iscsi 块(#没格式化) SDS
  • 1
  • 2
  • 3
  • 4
  • 5