党志强的博客_GlusterFS

GlusterFS基础知识

一、什么是GlusterFS glusterfs是一个横向扩展的分布式文件系统，就是把多台异构的存储服务器的存储空间整合起来给用户提供统一的命名空间。用户访问存储资源的方式有很多，可以通过NFS，SMB，HTTP协议等访问，还可以通过gluster本身提供的客户端访问。二、典型部署拓扑图三、概念和算法1、Trusted Storage Pool 一堆存储节点的集

glusterfs

转载精选 2015-05-22 11:26:57 3111 阅读

GlusterFS的分布式锁

“Glusterfs锁，并没有中央锁服务器的概念。它可以使用一个或多个节点作为锁管理节点，而底层直接使用系统上的锁机制，所以本身并不需要作过多的工作。它需要保证的是，锁的事务性，即要么锁成功，要么不锁。对于多个锁节点，这个尤其重要，必须所有节点都锁上，才是加锁成功。不能一个节点加锁成功，而其他节点不成功，这样容易引起死锁。”GlusterFS锁由记录锁构成，即通过fcntl实现，可对文件的某一区域

转载精选 2015-02-04 14:53:42 1883 阅读

Glusterfs hacker guide（三）

1 GlusterFS Translator API 21.1 Introduction Before we dive into the specifics of the API, it's important to understandtwo things about the context in which it exists. The f

api

lesson

guide

Glusterfs

translator

转载精选 2015-01-07 16:05:30 1593 阅读

Glusterfs hacker guide（二）

1 GlusterFS Translator API Translators are one of the core concepts of GlusterFS, and are consideredby some to be the feature most clearly differentiating it from otherwisesimilar

api

lesson

guide

Glusterfs

translator

转载精选 2015-01-07 16:03:58 1044 阅读

Glusterfs hacker guide（一）

1 Translator 101 Lesson1.1 Translator 101 Lesson 1: Setting the Stage This is the first postin a series that will explain some of the details of writing a GlusterFStranslat

api

lesson

guide

Glusterfs

translator

转载精选 2015-01-07 16:02:00 1645 阅读

GlusterFS初始化过程分析

其实整个glusterfs的初始化过程就是这4个进程（gluster、glusterd、glusterfs和glusterfsd）的初始化过程，下面就详细说明下这4个进程的初始化过程。整个glusterfs的代码目录结构截图如下：图3：一、gluster进程的初始化过程：gluster作为一个cli命令执行工具，初始化代码位于glusterfs/cli/Src/cli.c的main函数里面，具体初

分析

glusterfs

初始化过程

转载精选 2014-12-24 18:35:00 4397 阅读

GlusterFS整体分析

首先，熟悉整个业务流程前先了解下glusterfs的几个程序功能以及相互之间的关系！gluster ：cli的命令执行工具，负责将glusterfs的请求传递给glusterd进程来执行；大家安装后glusterfs后，执行gluster就会进入到该命令执行工具了；glusterd：管理daemon进程，同时负责接收gluster发送过来的请求并执行相应的操作，比如：调用glusterf

glusterfs

整体架构

转载精选 2014-12-24 18:33:23 1251 阅读

Gluster术语表

Xlator=translator: glusterfs模块的代名词Brick :存储目录是Glusterfs的基本存储单元，由可信存储池中服务器上对外输出的目录表示。存储目录的格式由服务器和目录的绝对路径构成，具体如下：SERVER:EXPORT.例如：myhostname:/exports/myexportdir/Volume :卷是存储目录的逻辑组合。大部分gluster

术语表

glusterfs

转载精选 2014-12-24 18:31:42 754 阅读

glusterd中的状态机浅析

当RPC请求到达Glusterd守护进程后，它会根据rpcsvc_actor_t gd_svc_cli_actors[] 数组来选择相应的处理函数。一般函数名为glusterd_handle_XXX 。这类函数一般负责从xdr中提取出请求数据，比如卷名，主机名等等。然后调用glusterd_op_begin 或者其他函数向请求队列里面注入事件(inject event)。gluste

状态机

glusterfs

转载精选 2014-12-24 18:28:54 1213 阅读

图说DHT

dht-diskusage.c 它包含dht中关于磁盘空间的获取与控制相关函数。图片中箭头代表数据流，其他是调用流。图片中的核心数据是conf->du_stats, 图片左半部分的函数负责获取数据存入du_stats结构体，而右半部分函数使用du_stats判断subvol是否可以再存放文件。 dht-rename.c&nb

dht

glusterfs

转载精选 2014-12-24 18:27:50 828 阅读

GlusterFS扩展属性

英文原文： http://hekafs.org/index.php/2011/04/glusterfs-extended-attributes/ 天马行空的意译，对正确性负责，不一定全和准确。扩展属性是现代文件系统普遍支持，而又不容易被用户发现的特性。 Glusterfs中DHT,AFT, stripe都广泛使用了扩展属性即xattr。 xattr是一个k

glusterfs

扩展属性

翻译精选 2014-12-24 18:26:44 2142 阅读

GlusterFS社区开发流程

Glusterfs开源社区使用 Git + Gerrit + Jenkins的开发流程。 RegisterSign up for an account at http://review.gluster.org by clicking 'Register' on the right-hand top. You can use yourgmail login a

glusterfs

社区开发

转载精选 2014-12-24 18:25:28 1116 阅读

Cool User File Systems: GlusterFS

One the coolest file systems in User Space has got to be GlusterFS. It has a very unique architecture that allows it to be configured for specific storage requirements and scenarios. It can be used as

介绍

glusterfs

转载精选 2014-12-24 18:23:59 939 阅读

GlusterFS 隐藏参数说明

OptionDefault ValueDescriptionAvailable Optionsauth.allow* (allow all)被允许访问的客户端其他的拒绝192.168.1.*auth.rejectNONE (reject none)被拒绝的客户端其他的允许192.168.2.*cluster.min-free-disk10% 最小空余硬盘空间百分比cluster.min-

说明

glusterfs

隐藏参数

转载精选 2014-12-24 15:02:42 10000+阅读 1收藏

比较分布式文件系统，只需关注小的同步写

Jeff Darcy个人发布的分布式存储测试分析报告为什么只关注Small Synchronous Writes 原文：http://pl.atyp.us/2013-07-why-sync-writes.html 肯定有其他op的性能需要考虑。但是其他op不能得出两个分布式文件系统的不同，只有这个小的同步写可以。

分布式文件系统

对比测试

关注点

翻译精选 2014-12-23 18:30:57 1258 阅读

Gluster vs Ceph 红帽的Ceph/Glusterfs测试报告的争论

测试报告发布http://redhatstorage.redhat.com/2013/11/07/red-hat-storage-outperforms-ceph-by-more-than-3x-for-openstack-cloud-environments/https://www.gluster.org/2013/11/on-the-gluster-vs-ceph-benchmarks/Joh

对比

glusterfs

测试报告

ceph

翻译精选 2014-12-23 18:12:53 10000+阅读

Glusterfs目录ls性能优化方案分析

目的和优化思路讨论了glusterfs对文件系统爬虫rsync／ls目录性能的现有优化措施和可能的进一步优化方案。优化思路是减少本地文件系统的元数据操作，减少fuse client的负载，减少req的网络轮询次数，减少一次网络通信时间，缓存预抓取，并发，异步，bulk 传输fuse readdirpluscentos 6.4最新内核，支持fuse readdirplus。微调mount timeo

ls

性能优化

glusterfs

转载精选 2014-12-23 18:06:03 4065 阅读 1点赞 6评论

GlusterFS Translator API

GlusterFS Translator API简介在深入translator api前，我们必须理解关于此api所在上下文的两个概念。一个是文件系统api，主要通过分配表xlator_fops,来展露大多数文件系统功能。xlator_fops,就是组合linux vfs的file_operations, inode_operations, and super_operations三类操作在一个数

API

GlusterFS

Translator

翻译精选 2014-12-23 18:03:53 2626 阅读

glusterfs性能优化

首先说两个关键知识点，供大家参考：1.glusterfs 3.x.x版本后，客户端不再存储配置文件。客户端依靠nfs协议（或gluster native协议）动态的从服务端获取卷的信息。2.与其它分布式存储不同，如果你建立的是复制卷，gluster客户端会并发的向几个服务器写入\读取数据，而不是通过服务器之间进行数据的传输。接下来介绍两个测试时可能会用到的工具：1.iozone：文件系统的benc

性能优化

gluster

read-ahead

write-behind

转载精选 2014-12-17 17:19:55 7196 阅读 1收藏

Glusterfs DHT(hash分布)源代码分析

摘要 Glusterfs3.3.1DHT部分的简介以及源代码流程分析， http://www.iesool.com/forum.php?mod=viewthread&tid=14&fromuid=1glusterfs dht 集群文件系统源码分析1.DHT简介GlusterFS使用算法进行数据定位，集群中的任何服务器和客户端只需根据路径和文

读写

glusterfs

源码分析

操作流程

转载精选 2014-10-14 14:37:15 6291 阅读 1收藏

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

敏而好学

GlusterFS基础知识

GlusterFS的分布式锁

Glusterfs hacker guide（三）

Glusterfs hacker guide（二）

Glusterfs hacker guide（一）

GlusterFS初始化过程分析

GlusterFS整体分析

Gluster术语表

glusterd中的状态机浅析

图说DHT

GlusterFS扩展属性

GlusterFS社区开发流程

Cool User File Systems: GlusterFS

GlusterFS 隐藏参数说明

比较分布式文件系统，只需关注小的同步写

Gluster vs Ceph 红帽的Ceph/Glusterfs测试报告的争论

Glusterfs目录ls性能优化方案分析

GlusterFS Translator API

glusterfs性能优化

Glusterfs DHT(hash分布)源代码分析