Lustre的主要组件有三个:先进的集群文件系统,基于对象的存储设备和可堆叠的对象驱动模型。
1.1 先进的集群文件系统
OBDFS是一个基于对象的文件系统,目前能很好的运行于单一的安装了对象存储设备的系统上。OBDFS能很好地扩展成集群文件系统,从而多个节点共享一个对象存储设备。传统的群集文件系统共享块存储设备。
Lustre文件系统具有很好的特性。允许扩展到10000个客户端,并支持巨大的并行IO池(1000's)的对象存储控制器。
1.2 基于对象的存储设备
Lustre采用对象存储设备。具有很大的优越性。
l 对象存储系统简介:
主要包含OSD和MDS。OSD是智能的对象存储设备,具有自身的CPU,内存和存储介质,提供以对象为单位的访问,不提供对块的访问;MDS管理整个文件系统的命名空间,包括文件系统的目录层次结构,和数据的分布。因为OSD是智能型的,所以MDS上的很多数据分布的工作交给OSD完成,从而降低了MDS的负载。Client端可以并发地从多个OSD上读写,达到线性叠加的高带宽。如ActiveScale对象存储文件系统的带宽可以达到10GB/s
l Nutch分布式文件系统的对比:
Nutch的分布式文件系统,就没有去解决这个问题,它是提供对块的访问,NameNode负责管理全局的文件命名空间以及每以及个块在DataNode上的分布。因此NameNode容易成为瓶颈。
l 一般的分布式文件系统:
一般包括服务端和客户端,服务器又分为SCM(Service Control Machine)和
Non-SCM,SCM负责与其它服务器的同步。当客户端和服务器端建立连接后,会在本地生成一个文件系统的映射,并和服务器端保持同步。客户端根据这个本地的映射的文件系统可以透明地访问在别的机器上共享的文件数据。
1.3 可堆叠的对象驱动模型
除了直接的控制存储的驱动之外,还可以在这一层上面实现不同的驱动,像逻辑的对象存储驱动和客户端的对象驱动等。
比如,可以很容易地实现逻辑的RAID磁盘阵列,只需要一个对象驱动能同时和多个直接的存储驱动交互即可。
LUT8架构 lustre架构的优缺点
转载本文章为转载内容,我们尊重原作者对文章享有的著作权。如有内容错误或侵权问题,欢迎原作者联系我们进行内容更正或删除文章。
提问和评论都可以,用心的回复会被更多人看到
评论
发布评论
相关文章
-
android pdf 和图片合成
pdf转图片怎么转?我们在工作中经常会使用到PDF格式的文件,这种格式的文件兼容性和安全性都较强。但是也为了满足我们随时查看和阅读文件的需求,我们还要将PDF文件转换成图片。将图片上传到手机上方便查看。我们该怎么将PDF文件转换成图片呢?下面一起来看两个PDF转图片的方法吧! 转换方法一:使用PS软件很多小伙伴都会使用PS软件来处理图片。在需要将PDF文件转换成图片时,我们当然也可以使用P
android pdf 和图片合成 apkg格式怎么打开 idea的setting界面怎么进 spire.pdf转图片质量 转换方法