随着云存储的大力发展,越来越多的开源分布式存储公布,MFS、gluster、ceph、lustre等等,百家争艳、各有千秋,本文针对ceph的学习进行记录,并针对性的glusterfs进行对比。一。框架、结构首先cephglusterfs本质上是完全不同的,ceph是基于rados的分布式存储Ceph的底层是RADOS,它的意思是“A reliable, autonomous, distrib
存储分类1.本地文件系统 ntfs(wind)、ext2、ext3、ext4、xfs ext2不带日志,34带有日志:文件系统的日志作用(防止机器突然断电):所有的数据在给磁盘存数据之前会先给文件系统的日志里面存一份,防止机器突然断电之后数据没有存完,这样它还可以从日志里面重新将数据拷贝到磁盘。 2.网络文件系统----做远程共享
转载 2024-07-27 14:56:05
139阅读
ceph官方文档地址:https://docs.ceph.com/docs/master/start/intro/一、ceph提供的存储1、块存储      块存储主要是将裸磁盘空间整个映射给主机使用的,或在磁盘阵列上划分逻辑卷映射给给主机使用。2、文件存储      文件存储主要是为了克服块存储中文件服务共享的问题,所以有了文件存储。文
从零开始搭建内网高可用k8s集群+ceph分布式存储系统+prometheus监控前言前期准备服务器硬件准备服务器软件准备第一步-搭建内网yum仓库root@test:root@node2:root@master1, master2, node1第二步-搭建内网harbor服务器root@test:root@ALL:root@node2:第三步-在master1,master2节点上搭建hapr
Ceph中的容量计算与管理 在部署完Ceph集群之后,一般地我们可以通过Ceph df这个命令来查看集群的容量状态,但是Ceph是如何计算管理的呢?相信大家都比较好奇。因为用过 ceph df这个命令的人都会有这个疑问,它的输出到底是怎么计算的呢?为什么所有pool的可用空间有时候等于GLOBAL中的可用空间,有时候不等呢? 带着这些疑问我们可以通过分析ceph df的实现,来
一次CephFS性能分析1. 背景2. 性能分析思路2.1. 理论值计算2.2. 实际操作下看能不能复现2.2.1. 性能分析关注点2.2.2. 开始分析2.2.2.1. ceph -s2.2.2.2. 查看mds服务2.2.2.3. 查看ceph osd perf2.2.2.4. 查看磁盘iostat2.2.2.5. 网络2.2.2.6. 客户端磁盘3. 总结1. 背景小明在使用文件系统的过程中
转载 2024-04-30 16:45:12
188阅读
前言最近在做Ceph性能测试相关工作,在测试初期由于没有得到理想的测试结果,因此对Ceph集群进行了优化,但是一直有个问题萦绕在我的脑海:基于当前硬件配置,这个Ceph集群的极限是多少?由于这个问题Ceph的配置息息相关,为了简化问题,在本文中我们只会会讨论3个变量:冗余策略(纠删码、多副本),读/写,ObjectStore。我们将会基于磁盘、网络、CPU性能来估算出一个集群的性能,除此以外的参
转载 2024-04-19 09:55:09
118阅读
理解块存储、文件存储对象存储的应用场景选择应用场景分布式存储的应用场景相对于其存储接口,现在流行分为三种:对象存储: 也就是通常意义的键值存储,其接口就是简单的 GET、PUT、DEL 其他扩展,如七牛、又拍、Swift、S3块存储: 这种接口通常以 QEMU Driver 或者 Kernel Module 的方式存在,这种接口需要实现 Linux 的 Block Device 的接口或者
转载 2024-06-05 21:56:41
92阅读
内容概括1、存储发展史随着Open Stack的快速发展,给Caph的发展注入了强心剂,越来越多的人使用Ceph作为Open Stack的底层共享存储,Ceph在中国的社区也蓬勃发展起来。近两年Open Stack火爆度不及当年,借助于云原生尤其是Kubernetes技术的发展,作为底层存储的基石,Ceph再次发力,为Kubernets有状态化业务提供了存储机制的实现。 企业中使用存储按照其功能,
转载 2024-05-31 13:38:31
308阅读
      Ceph是呼声很高的开源分布式的SDS产品存储系统。同时提供对象存储、块存储和文件系统存储三种功能,满足不同应用需求。Ceph使用C++语言开发,遵循LGPL协议开源。Sage Weil(Ceph论文发表者)于2011年创立了以Inktank公司主导Ceph的开发社区维护。2014年Redhat收购 inktank公司,并发布Inktank Ceph
转载 2024-08-28 22:32:44
143阅读
一、介绍网络文件系统,英文Network File System(NFS),是一种基于TCP传输协议的文件共享习通。 NFS的CS体系中的服务端启用协议将文件共享到网络上,然后允许本地NFS客户端通过网络挂载服务端共享的文件。1、来源 2、特点 1、方便 2、资源占用少 3、使用率高输出 export二、NFS原理 当NFS服务器设置好一个共享目录,且设置好授权ip以及权限后,有访问权的客户
转载 2024-08-13 17:03:49
192阅读
Ceph使用NFS协议 Ceph是一个开源的分布式存储系统,最初由Sage Weil于2004年创建。它的目标是提供一个可扩展高度可靠的分布式存储解决方案。Ceph的设计理念是将数据分布在多个节点上,并利用一致性哈希算法来确定数据在集群中的位置,从而实现数据的可靠性高效性。为了进一步提高Ceph的灵活性兼容性,NFS(网络文件系统)协议被引入。 NFS协议是一种在网络上共享文件的协议。通
原创 2024-02-01 10:25:33
283阅读
源码编译安装 ganesha简介系统环境:CentOS 7.5ceph:luminousnfs-ganesha:v2.6 stable安装步骤安装依赖首先需要安装编译会用到的公共库1yum install gcc git cmake autoconf libtool bison flex doxygen openssl-devel gcc-c++ krb5-libs krb5-devel libu
转载 2月前
386阅读
目录nfs简介nfs应用nfs实践1.服务端客户端NFS配置详解搭建考试系统搭建WEB服务配合NFS实现文件共享nfs简介NFS是Network File System的缩写及网络文件系统。NFS主要功能是通过局域网络让不同的主机系统之间可以共享文件或目录。 NFS系统Windows网络共享、网络驱动器类似, 只不过windows用于局域网, NFS用于企业集群架构中, 如果是大型网站, 会用
转载 2024-05-16 12:32:56
256阅读
先简单介绍一下NFS服务器是什么?   NFS server可以看作是一个FILE SERVER,它可以让你的PC通过网络将远端得NFS SERVER共享出来的档案MOUNT到自己的系统中,在CLIENT看来使用NFS的远端文件就象是在使用本地文件一样。  RPC(Remote Procedure Call)   NFS本身是没有提供信息传输的协议和功能的,但NFS却能让我们通过网络进行资料的分享
转载 2024-08-15 09:52:00
54阅读
1.NFS基本概述共享存储,文件服务器NFS是Network File System的缩写及网络文件系统。NFS主要功能是通过局域网络让不同的主机系统之间可以共享文件或目录。NFS系统Windows网络共享、网络驱动器类似, 只不过windows用于局域网, NFS用于企业集群架构中, 如果是大型网站, 会用到更复杂的分布式文件系统FastDFS,glusterfs,HDFS,ceph为什么要使
转载 2024-05-17 08:07:35
41阅读
ftp服务器(ftp/tftp)、 Samba服务器、NFS服务器的区别        对于一个真实的运行环境而言,配置启用文件服务器都是很有必要的。把重要的数据集中存储管理,其安全性显然比分布存储要可靠得多。为此,建议系统管理员配制启用文件服务器作为基本的管理策略。根据使用的方式来看,可以分为3种类别的文件服务
一、NFS简介NFS是Network File System的缩写及网络文件系统。NFS主要功能是通过局域网络让不同的主机系统之间可以共享文件或目录。NFS系统Windows网络共享、网络驱动器类似, 只不过windows用于局域网, NFS用于企业集群架构中, 如果是大型网站, 会用到更复杂的分布式文件系统FastDFS,glusterfs,HDFS,ceph二、NFS应用1.用户访问NFS
转载 2024-04-26 13:36:43
94阅读
1. 概述2. 前提条件3. 版本说明4. 安装4.1. 配置yum源4.2. 安装软件5. 配置6. 使用7. 部署问题7.1. nfs挂载之后无法创建文件、文件夹8. 剩下的问题9. 参考文档1. 概述cephfs直接使用不变,需要安装较多的依赖,相对来说nfs更加通用。FSAL_CEPH 调用 libcephfs2 将 NFS 转义为 Cephfs 协议再存入到 Ceph 中,通过这种途径来
转载 2024-05-11 12:57:21
63阅读
主要内容概述常见存储方式Ceph 方式特性Ceph 架构组成Ceph 网络模型Ceph 版本Ceph 部署方法介绍基于 Ceph-deploy 部署 Ceph扩展 Ceph 集群实现高可用1 存储基础1.1 传统存储传统的存储类型:DAS设备:直连存储SAS,SATA,SCSI,IDE,USB无论是那种接口,都是存储设备驱动下的磁盘设备,而磁盘设备其实就是一种存储,这种存储是直接接入到主板总线上
  • 1
  • 2
  • 3
  • 4
  • 5