最近在研究负载均衡和集群，其中涉及到一个主要问题是，如何让集群中的real server共享一套文件系统。在网上查到FastDFS，国人（happy fish，感谢他的开源精神）开发的一套轻量级分布式文件系统。实际搭建了一下，感觉还不错，小巧易用，支持http下载。
虽然FastDFS官方网站 上已经有比较详细的按照使用手册，但在实际搭建过程中，还是遇到了很多问题，希望我的记录可以让后来的同学们少
文章目录一、NFS1、NFS 介绍2、构建NFS远程共享存储3、实战（1）环境准备（2）配置服务端（3）客户端二、FTP1、Ftp 介绍（1）FTP基础（2）ftp两种模式2、Vsftp 服务器（1）环境准备（2）vsftpd配置（3）ftp配置本地用户登录三、系统优化检测常用命令1、查看平均负载2、释放buffer和cache3、带宽使用情况4、网络接口统计报告 一、NFS1、NFS 介绍NF
转载
2024-04-14 11:44:51
126阅读
FastDFS是一款类Google FS的开源分布式文件系统，它用纯C语言实现，支持Linux、FreeBSD、AIX等UNIX系统。它只能通过专有API对文件进行存取访问，不支持POSIX接口方式，不能mount使用。准确地讲，Google FS以及FastDFS、mogileFS、HDFS、TFS等类Google FS都不是系统级的分布式文件系统，而是应用级的分布式文件存储服务。FastDFS
转载
2024-08-29 13:40:01
145阅读
FastDFS（分布式文件系统）使用介绍一、基本介绍1.FastDFS 的特性2.FastDFS 的存储策略二、使用 FastDFS 实现分布式文件存储1.安装 FastDFS 软件2.验证上传/下载等操作3.通过 Nginx 实现 URL 访问 一、基本介绍FastDFS 是用 C 语言编写的一款开源的分布式文件系统，功能主要包括：文件存储、文件同步、文件访问（上传、下载） 等，解决了文件大容
转载
2024-03-19 10:51:53
414阅读
点赞
1 文章目的
最近要用这个：
了解项目中使用FastDFS的原因和意义。掌握FastDFS的架构组成部分，能说出tracker和storage的作用。了解FastDFS+nginx上传和下载的执行流程。掌握FastDFS+nginx在项目中作为图片服务器，上传和下载方法。 2 FastDFS介绍2.1 什么是FastDFS 一、Fast
新巴巴运动网 项目第四天 今天内容介绍FastDFS 分布式文件系统 原理 为什么要使用FastDFS 保存到Tomcat 缺点 保存到FastDFS 优点 FastDFS搭建（由运维工程师） 网管 FastDFS的Java接口（保存图片到FastDFS上去） 修改页面 提交 全选 删除（批量） 商品表四张 逆向工程（Dao接口、Mapper、POJO） 增强版 测试工程（
一、FastDFS简介1 简介 FastDFS是一个轻量级的开源分布式文件系统。2008年4月份开始启动。类似google FS的一个轻量级分布式文件系统，纯C实现，支持Linux、FreeBSD、AIX等UNIX系统。 主要解决了大容量的文件存储和高并发访问的问题，文件存取时实现了负载均衡。实现了软件方式的磁盘阵列（Redundant Arrays of Independent Drives，R
转载
2024-07-09 11:50:59
54阅读
一、FastDFS的简介 FastDFS是一个开源的轻量级分布式文件系统，为互联网应用量身定做，简单、灵活、高效，采用C语言开发，由阿里巴巴开发并开源。 FastDFS对文件进行管理，功能包括：文件存储、文件同步
fastDSF介绍 FastDFS是用c语言编写的一款开源的分布式文件系统，它是由淘宝资深架构师余庆编写并开源。FastDFS专为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。为什么要使用fastDFS呢？ NFS、GFS都是通用的分布式文件系统，通用的分布式文件系统的优
转载
2023-09-27 19:39:36
215阅读
1 FastDFS1.1 FastDFS介绍FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。国开发源的作用：费用便宜、重要资源掌握在自己手里、访问速度购买CDNOSS存储：第三方存储服务。优点：实现技术简单，不需要搭建服务，只
转载
2024-06-19 20:02:57
96阅读
部署yum仓库及NFS共享服务yum仓库服务配置FTP源服务器配置:客户端配置:部署yum软件仓库使用yum工具管理软件包YUM工具概述NFS共享存储服务NFS (网络文件服务) yum仓库服务YUM概述YUM (Yellow dog Updater Modified)基于RPM包构建的软件更新机制可以自动解决依赖关系所有软件包由集中的YUM软件仓库提供准备安装源3-1软件仓库的提供方式
Fastdfs入门分布式文件系统 分布式文件系统（Distributed File System，DFS）是一个软件/软件服务器，这个软件可以用来管理文件。但这个软件所管理的文件通常不是在一个服务器节点上，而是在多个服务器节点上，这些服务器通过网络相连构成一个庞大的文件存储服务器集群，这些服务器用于存储文件资料，通过分布式文件系
转载
2024-05-08 11:31:23
699阅读
前言传统web站点部署大部分都是基于动静分离的方式，静态图片存放于一台nfs存储。但是这种架构有一个问题就是nfs存储是单点，而且如果图片量过大的时候，则nfs会成为性能短板。基于此可以采用分布式存储的替代方案来替代nfs。
fastdfs不但可以存储图片，还可以存储其他非结构化数据，其特性是可以存放海量的中小容量文件，而且性能和容量也不会成为瓶颈。fastdfs架构fastdfs基于如下两个组件
转载
2023-11-24 22:21:01
119阅读
MinIO 和 SeaweedFS 简单对比 MinIO是N个磁盘，可以任意损坏N/2个，而数据不会丢失，但是这种情况下只能读，不能写，如果有N/2+1个磁盘完好，则可以读写。实际磁盘空间占用，我的测试结果为：一个31,294,295 b的文件，10个磁盘的情况下，每个磁盘分到恰好6258955 b，占用总磁盘空间是单个文件size的恰好2倍。另外，我还测过4
转载
2024-05-20 10:30:45
278阅读
测试环境测试使用的FastDFS服务器，HDFS服务器均在vmware虚拟机中搭建，HDFS的服务器直接由FastDFS服务器克隆而来，所以除了一个安装了hadoop，一个安装了FastDFS，其他环境完全一致。HDFS配置了集群环境，一主三从，但是只打开一台从节点服务器。vmware的配置如下图：测试主机（上述vmware、测试代码的运行环境）CPU、内存如下图：编码层面，对HDFS和Fa
转载
2024-02-29 16:50:18
56阅读
选型需要考虑，但不限于如下几个方面:自建 nfs 选型，moosefs，ceph，seaweedfs，lustre，glusterfs，FastDFS 等。如何平滑迁移？大文件、软链不少，小文件较多，迁移耗时长，且迁移过程中要保证不停服运行。要考虑做隔离，除了给平台提供服务，还会给其他产品提供服务，各自挂了不影响其他的。容错恢复能力和监控。 这篇博客有简单明了的表格对比，不再赘述。针对
目录HDFS、fastDFS、Mongo gridFS、MinIoHDFS概要适用场景不适用场景安装教程fastDFS概要安装教程Mongo GridFs概要优点使用场景MinIO概要优势适用场景 HDFS、fastDFS、Mongo gridFS、MinIoHDFS概要HDFS 全称 Hadoop Distributed File System。也就是hadoop分布式文件存储系统, 基本架构
转载
2024-02-12 08:33:26
107阅读
一. NFS1. NFS简介NFS全称是network file systemNFS允许一个系统在网络上与他人共享目录和文件。通过使用NFS，用户和程序可以像访问本地文件一样访问远端系统上的文件。 假如有三台机器A, B, C，它们需要访问同一个目录，目录中都是图片，传统的做法是把这些图片分别放到A, B, C. 但是使用NFS只需要放到A上，然后A共享给B和C即可。访问的时
FastDFS和Ceph是两种常用的分布式文件存储系统，它们都具有高性能、高可靠性和可扩展性等优点，但在具体实践中却有一些不同之处。下面将对FastDFS和Ceph进行比较，以帮助读者更好地了解它们之间的差异和适用场景。
首先，从架构上看，FastDFS是一个基于文件系统的分布式文件存储系统，中心节点负责文件索引和元数据管理，存储节点负责文件的存储和传输。而Ceph则是一个分布式存储系统，采用了
原创
2024-03-04 09:51:24
303阅读
Redis学习方式：上手就用基本的理论先学习,然后将知识融汇贯通nosql讲解为什么要用Nosql现在都是大数据时代大数据一般的数据库无法进行分析处理了至少要会Springboot+SpringCloud压力一定会越来越大，适者生存1.单机MySQL的年代90年代，一个基本的网站访问量一般不会太大，单个数据库完全足够，那个时候，更多的去使用静态网页，HTML，服务器根本没有太大的压力思考一下，这种
转载
2024-10-13 21:45:57
85阅读
