docker的两类存储资源Docker 为容器提供了两种存放数据的资源：由 storage driver 管理的镜像层和容器层。Data Volume。storage driver先回顾一下docker的镜像分层结构：容器由最上面一个可写的容器层，以及若干只读的镜像层组成，容器的数据就存放在这些层中。这样的分层结构最大的特性是 Copy-on-Write：新数据会直接存放在最上面的容器层。修改现有
转载
2023-06-15 10:36:52
151阅读
目录一、分布式文件系统二、FastDFS简介三、FastDFS整体架构四、文件上传流程 五、文件下载流程六、文件删除流程七、文件同步机制八、总结一、分布式文件系统分布式文件系统 (Distributed File System) 是一个软件/软件服务器，这个软件可以用来管理文件。但这个软件所管理的文件通常不是在一个服务器节点上，而是在多个服务器节点上，这些服务器节点通过网络相连构成一个庞大的文件存
转载
2024-03-04 07:16:21
53阅读
分布式文件存储1 FastDFS介绍FastDFS 是一个由 C 语言实现的开源轻量级分布式文件系统，作者余庆(happyfish100)，支持 Linux、FreeBSD、AID 等 Unix 系统，解决了大数据存储和读写负载均衡等问题，适合存储 4KB~500MB 之间的小文件，如图片网站、短视频网站、文档、app 下载站等，UC、京东、支付宝、迅雷、酷狗等都有使用。该软件作者是阿里巴巴大牛、
转载
2024-01-30 06:05:11
96阅读
关于docker分享之分布式存储 glusterfs 经典语录：实际实验搭建：前提 是要保证 一个 /data目录不和根分区在同一个磁盘！1、centos7安装glusterfs参考链接：https://wiki.centos.org/SpecialInterestGroup/Storage/gluster-Quickstart#To Use the RPMs from Storage SIG,
转载
2023-08-17 14:39:20
338阅读
文章目录使用docker和minio实现对象存储什么是minio安装minio使用minio 使用docker和minio实现对象存储什么是minio Minio是一个开源的分布式文件存储系统，它基于 Golang 编写,虽然轻量，却拥有着不错的高性能，可以将图片、视频、音乐、pdf这些文件存储到多个主机，可以存储到多个Linux，或者多个Windows，或者多个Mac，Minio中存储最大文件
转载
2023-09-03 16:53:39
112阅读
为了解决移动端算力瓶颈，HarmonyOS跨端分布式计算应运而生，给用户带来易协同、低延迟和高稳定的分布式体验。本期，我们将对跨端分布式计算技术进行详细的分析。
作者：zhengkai，分布式通信首席技术专家 当今的移动应用都向着智能化和多样化方向发展，例如AI辅助，VR/AR应用，沉浸式游戏等。然而现实中的移动设备，因为便携性要求受限于尺寸、电池
本文是对《docker容器与容器云》第二章“搭建你的第一个Docker应用栈“的整理和总结，接下来打算把它在swarm和compose上分别实现一次。环境：172.16.71.43 centos7 ,docker version 1.8将要搭建的应用栈包含六个节点，一个代理节点，两个web应用节点，一个主数据库节点和两个从数据库节点. HAProxy负责负载均衡，redis担任数据存储服务，Dj
转载
2023-08-18 13:39:38
104阅读
阅读准备docker基础命令，docker-compose基础pyspider基础如果您不熟悉上面的内容，可以先网上查阅有关资料。1. 创建网络接口首先，创建一个Driver为bridge的网络接口，命名为pyspider：docker network create --driver bridge pyspider说明1： 需要创建该网络接口的原因是：在下面创建Docker容器的过程中，我们使用了
转载
2023-07-19 19:12:14
115阅读
一、介绍Harbor是一个用于存储和分发Docker镜像的企业级Registry服务器，由vmware开源，其通过添加一些企业必需的功能特性，
例如安全、标识和管理等，扩展了开源Docker Distribution。作为一个企业级私有Registry服务器，Harbor提供了更好的性能和安全。
提升用户使用Registry构建和运行环境传输镜像的效率。Harbor支持安装在多个Registry节
转载
2023-07-09 08:56:48
90阅读
基于 GlusterFS 实现 Docker 集群的分布式存储以 Docker 为代表的容器技术在云计算领域正扮演着越来越重要的角色，甚至一度被认为是虚拟化技术的替代品。企业级的容器应用常常需要将重要的数据持久化，方便在不同容器间共享。为了能够持久化数据以及共享容器间的数据，Docker 提出了 Volume 的概念。单机环境的数据卷难以满足 Docker 集群化的要求，因此需要引入分布式文件系统
转载
2023-09-15 15:36:37
101阅读
转发前言：镜像仓库，以及企业级的其他存储仓库，甚至数据库，最好都采用分布式做法，前几天看到的fastdfs属于其中一种，还有很多，本文转发自info，主要是做个备注和收藏之用。知乎十万级容器规模的分布式镜像仓库实践令孤无忌2020 年 3 月 26 日文化 & 方法前言知乎在 2016 年已经完成了全量业务的容器化，并在自研容器平台上以原生镜像的方式部署和运行，并在后续陆续实施了 CI
转载
2023-06-15 09:33:44
153阅读
remote_hosts=127.0.0.1server_port=1099server.rmi.localport=1099server.rmi.ssl.disable=true ...
转载
2021-08-23 17:50:00
64阅读
2评论
以 Docker 为代表的容器技术在云计算领域正扮演着越来越重要的角色，甚至一度被认为是虚拟化技术的替代品。企业级的容器应用常常需要将重要的数据持久化，方便在不同容器间共享。为了能够持久化数据以及共享容器间的数据，Docker 提出了 Volume 的概念。单机环境的数据卷难以满足 Docker 集群化的要求，因此需要引入分布式文件系统。目前开源的分布式文件系统有许多，例如 GFS，Ceph，H
转载
2023-12-01 11:22:44
76阅读
使用Docker搭建分布式文件存储系统MinIO在做暑假实训项目的时候，之前说要用到文件存储系统，实训老师推荐我们去学一下FastDFS，但是去网上搜教程的时候，都在说MinIO的上手比FastDFS简单，而且性能也优于FastDFS，所以直接弃用FastDFS改去学MinIO了有一点我要说明一下MinIO基于GNU AGPL v3 开源协议，按理说可以商用分布式文件系统应用场景互联网海量非结构化
转载
2023-12-07 15:30:19
79阅读
1.分布式存储算法1.1 哈希取余算法2亿条记录即2亿个k,v，单机无法满足数据存储，需要集群。假设集群由3台机器组成，用户每次读写操作都是根据公式(hash(key)%n 台机器数)，通过计算出哈希取余值，来决定数据存储到哪个节点上，或者到那个节点取数据。优点：简单并且有效，只需要提前预估数据量，规划数据节点数量，比如3、8、10台机器。使用哈希取余算法可以让固定的有i部分请求落到同一台服务器上
转载
2023-12-15 21:43:40
34阅读
https://hub.duite/-/tree/14.0/attachment_minio 多节点 https://www.cnblogs
原创
2022-08-02 06:44:21
716阅读
1、环境准备 3台virtualbox虚拟机，用来安装ceph集群，已用docker-machine安装上了docker，每台虚拟机虚拟创建一个5G的硬盘，用于存储osd数据，例如：/dev/sdb 1台客户端manager，客户端可以扩展至多台形成swarm集群 hostname ip 部署 lo
转载
2021-05-10 15:25:00
545阅读
2评论
1.简介FastDFS是由国人余庆所开发，其项目地址：https://github.com/happyfish100FastDFS对文件进行管理，功能包括：文件存
原创
2022-06-30 11:01:08
506阅读
导读前一段时间研究了一下分布式块存储Longhorn这个项目，Longhorn是完全基于K8s实现的分布式块存储，最大的特性就是他通过以微服务的方式（engine_instance+replicas）来提供存储服务，所以可用性极高。但本质还是通过iscsi把存储目录映射为一个盘挂到节点上然后再mount给容器使用，所以运行效率本身不太高，看到网上说的要比nfs可能要好一点，但是肯定是比不上本地磁盘
转载
2024-03-25 10:49:37
126阅读
一个比FastDFS还好用的分布式文件存储服务 使用docker部署minio 官方文档 Docker部署 [root@rzk ~]# docker run -p 9001:9001 -p 9999:9999 --name minio \ > -d --restart=always \ > -e M
原创
2022-07-17 00:21:28
285阅读
