使用Docker搭建分布式文件存储系统MinIO在做暑假实训项目的时候，之前说要用到文件存储系统，实训老师推荐我们去学一下FastDFS，但是去网上搜教程的时候，都在说MinIO的上手比FastDFS简单，而且性能也优于FastDFS，所以直接弃用FastDFS改去学MinIO了有一点我要说明一下MinIO基于GNU AGPL v3 开源协议，按理说可以商用分布式文件系统应用场景互联网海量非结构化
转载
2023-12-07 15:30:19
79阅读
概述分布式通信的几种方式目前的分布式架构主要由corba和JavaEE搭建，JavaEE优点是跨平台，开发
原创
2022-10-31 07:27:38
153阅读
Docker安装FastDFS分布式文件系统：
• 1.首先下载FastDFS文件系统的docker镜像
• 2.拉取镜像
• 3.查看镜像
• 4.使用docker镜像构建tracker容器（跟踪服务器，起到调度的作用）：
• 5.使用docker镜像构建storage容器（存储服务器，提供容量和备份服务）：
转载
2023-07-11 07:31:58
122阅读
【PChome 资讯报道】2019 年 8 月 9 日下午，华为消费者业务今天在其全球开发者大会上正式向全球发布其全新的基于微内核的面向全场景的分布式操作系统——鸿蒙 OS。随着华为全场景智慧生活战略的不断完善，鸿蒙 OS 将作为华为迎接全场景体验时代到来的产物，发挥其轻量化、小巧、功能强大的优势，率先应用在智能手表、智慧屏、车载设备、智能音箱等智能终端上，着力构建一个跨终端的融合共享生态，重塑安
转载
2023-06-26 19:53:04
88阅读
ROS是一种分布式软件框架，节点之间通过松耦合的方式进行组合。如何实现分布式多机通信（1）设置IP地址，确保底层链
原创
2022-06-01 13:34:42
1271阅读
ROS（Robot Operating System）是一个用于编写机器人软件的灵活框架，提供了一套工具和库，可以帮助开发者快速地构建机器人应用程序。ROS支持分布式通信，允许不同的节点在不同的计算机上运行，通过网络进行通信交互。在本文中，我将向你介绍如何在ROS中实现分布式通信的步骤和代码示例。
整体流程
首先，我们来看一下在ROS中实现分布式通信的整体流程。在ROS中，我们可以通过发布者和
原创
2024-04-25 11:01:15
148阅读
使用docker构建分布式接口服务
docker的安装
·# 更新软件包，线上环境慎用
yum update
# 安装docker
yum install -y docker
# 启动docker 服务
systemctl start docker
# 查看docker版本
docker version
转载
2023-07-19 19:23:50
25阅读
环境搭建与部署是产品实际开发过程中的第一步，其操作过程极易产生错误，如：在若干不同版本操作系统、不同配置的机器上搭建无差异化开发，测试环境难度高；产品研发环境与发布环境往往不同，正式上线通常会出现难以预料的问题，产品发布风险较高。项目扩大的过程中，参与人员流动性较大，每个人都要部署自己的开发环境，着实浪费时间。而且人为操作存在不可避免的失误，改正这些失误需要消耗更多的时间，代价较大，而Docker
转载
2023-10-07 15:54:01
95阅读
本着交流和学习的心态和大家分享本人的第一篇博客（客套话就不说了，其实就是说说自己编写的思路和及对问题的解决办法）。先说说技术路线，选择docker,scrapy,scrapy_redis 的原因很简单，省钱又方便。（苦比的大四党并不享用云主机优惠）本爬虫主要抓取了豆瓣movie，book，music分类中的资源。先看看最后抓取的数据量（大概12万的数据(爬虫待优化)）好了，下面就讲讲我的心路历程。
转载
2023-07-11 17:09:10
247阅读
前言我的京东价格监控网站需要不间断爬取京东商品页面，爬虫模块我采用了Scrapy+selenium+Headless Chrome的方式进行商品信息的采集。由于最近爬虫用的服务器到期，需要换到新服务器重新部署，所以干脆把整个模块封装入Docker，以便后续能够方便快速的进行爬虫的部署。同时，由于我的Scrapy整合了redis，能够支持分布式爬取，Docker化后也更方便进行分布式的
转载
2023-07-11 13:58:43
154阅读
文章目录使用docker和minio实现对象存储什么是minio安装minio使用minio 使用docker和minio实现对象存储什么是minio Minio是一个开源的分布式文件存储系统，它基于 Golang 编写,虽然轻量，却拥有着不错的高性能，可以将图片、视频、音乐、pdf这些文件存储到多个主机，可以存储到多个Linux，或者多个Windows，或者多个Mac，Minio中存储最大文件
转载
2023-09-03 16:53:39
112阅读
目录
Mesos简介 Zookeeper简介 Marathon简介 docker集群实践 Mesos集群部署 一、Mesos简介 Mesos是Apache下的开源分布式资源管理框架，它被称为分布式系统的内核。Mesos最初是由加州大学伯克利分校的AMPLab开发，后在Twitter得到广泛使用。 Mesos-Master：主要负责管理各个framework和slave，并将slave上的
转载
2024-06-12 14:07:28
57阅读
引言安装过Fastdfs的朋友都知道，过程是非常复杂，有一个步骤错了，可能就要重头来过，最近我在做毕业设计，就想着能不能用docker搭建一个Fastdfs，学过docker不用岂不是浪费了，最后还是安装好了，而且过程非常简单，下面我来分享一下我的安装过程。安装步骤首先拉取最新版的fastdfs镜像docker pull delron/fastdfs下载完成后，先创建一下本地的映射目录，方便我们查
转载
2023-08-18 14:47:32
58阅读
一.整体思路及中心节点的配置1.首先在虚拟机中运行一个docker，docker中运行的是一个linux系统，里面有我们所有需要的东西，linux系统，python，mysql，redis以及一些python的库如request、urllib等，
最好把这个做成一个镜像文件docker save -o 文文件名 镜像id2.我们把上面的镜像文件还原为一个镜像：docker load --inp
转载
2024-05-29 20:19:04
58阅读
文章目录docker 分布式仓库harbor1.Harbor 功能官方介绍2. 安装 Harbor2.1 解决依赖环境1.安装docker2.安装docker-compasose2.2 并配置harbor启动2.3 .harbor后期 修改配置3. 用harbor 和上传镜像3.1 构建harbor 项目3.2 给旧镜像打标签3.3 上传镜像3.4 下载镜像4. harbor 的复制管理4.1
转载
2023-12-15 20:22:59
103阅读
?’? ???, ? ?? ? ???????? ??????? ???? ???????, ?????.? ??????: ????? ??????????? ????????: ?’? ????????? ???????? ?????? ???????, ????????, ??????????? ??????, ?????????? ??? ?? ??.? ??? ?? ????? ??：?
转载
2023-09-01 21:43:51
133阅读
关于docker分享之分布式存储 glusterfs 经典语录：实际实验搭建：前提 是要保证 一个 /data目录不和根分区在同一个磁盘！1、centos7安装glusterfs参考链接：https://wiki.centos.org/SpecialInterestGroup/Storage/gluster-Quickstart#To Use the RPMs from Storage SIG,
转载
2023-08-17 14:39:20
338阅读
1.分布式存储算法1.1 哈希取余算法2亿条记录即2亿个k,v，单机无法满足数据存储，需要集群。假设集群由3台机器组成，用户每次读写操作都是根据公式(hash(key)%n 台机器数)，通过计算出哈希取余值，来决定数据存储到哪个节点上，或者到那个节点取数据。优点：简单并且有效，只需要提前预估数据量，规划数据节点数量，比如3、8、10台机器。使用哈希取余算法可以让固定的有i部分请求落到同一台服务器上
转载
2023-12-15 21:43:40
34阅读
一：分布式架构网络通信 在分布式服务框架中，一个最基础的问题就是远程服务是怎么通讯的，在Java领域中有很多可实现远程通讯的技 术，例如：RMI、Hessian、SOAP、ESB和JMS等 1.1：基本原理 ...
转载
2020-09-21 15:47:00
1253阅读
2评论
转发前言：镜像仓库，以及企业级的其他存储仓库，甚至数据库，最好都采用分布式做法，前几天看到的fastdfs属于其中一种，还有很多，本文转发自info，主要是做个备注和收藏之用。知乎十万级容器规模的分布式镜像仓库实践令孤无忌2020 年 3 月 26 日文化 & 方法前言知乎在 2016 年已经完成了全量业务的容器化，并在自研容器平台上以原生镜像的方式部署和运行，并在后续陆续实施了 CI
转载
2023-06-15 09:33:44
153阅读
