最近在写一个FTP上传工具，用到了Apache的FTPClient，为了提高上传效率，我采用了多线程的方式，但是每个线程频繁的创建和销毁FTPClient对象势必会造成不必要的开销，因此，此处最好使用一个FTPClient连接池。仔细翻了一下Apache的api，发现它并没有一个FTPClientPool的实现，所以，不得不自己写一个FTPClientPool。下面就大体介绍一下开发连接池的整个过
# Docker部署FDFS集群
## 一、什么是Docker？
Docker是一个开源的应用容器引擎，可以让开发者集中精力于开发和测试，而不用关心应用程序的运行环境。通过使用Docker，我们可以方便地将应用程序及其依赖打包到一个可移植的容器中，并在不同的环境中进行部署和运行。
## 二、什么是FDFS？
FastDFS（Fast Distributed File System）是一个开
原创
2024-01-03 04:57:15
223阅读
# FDFS集群部署 Docker 教程
在当今的开发环境中，分布式文件系统（FastDFS）已经成为一种常用的文件存储解决方案。而使用Docker进行集群部署使其更为灵活和高效。本文将带你一步步实现FDFS集群的Docker部署。
## 部署流程
首先，我们简要介绍一下整个部署的流程，便于小白理解整体步骤。如下表格所示：
| 步骤编号 | 步骤说明 | 需要执行的命令 |
|--
♊ 3.3、FTP服务器了解了FTP协议，那FTP服务器就很容易理解了。FTP服务器就是支持FTP协议的服务器，我们平常可以在电脑上安装一个FTP工具就可实现与FTP服务器进行文件传输，FTP服务器常见分为：Windows FTP服务器和Linux FTP服务器。我们自己的电脑也可以当做一个FTP服务器，如Windows系统就可以通过自带的ISS管理器来搭建一个FTP服务器(本文案例就是使用这个)
FastDFS引言本地存储与分布式文件系统本地存储的缺点：是否有备份？ 没有成本角度？ 贵 服务器 ：用于计算 ---- cpu/内存 用于存储 ---- 硬盘大存储瓶颈？ 容量有限是否使用于应用服务器的集群环境？ 不适用。。。等等解决本地存储的缺点 : 使用分布式文件系统 — 引入存储服务的概念支持冗余备份；可以增加节点，所以理论上没有瓶颈；支持集群环境；支持负载均衡特性，可以在一个存储节点压力
转载
2023-07-31 16:52:50
77阅读
简单说一下线上环境配置： 15台kafka、30台flink（2台job，28台task）512G内存，挂载7T硬盘 数据量大概是每秒560w+背景：发现kafka的部分消费者组有积压，打算调整程序的一些配置参数，来提高flink的处理能力，只做配置文件的修改，然后重启程序。再flink界面观察到任务在不停重启。解决：先在flink界面查看报错任务的日志，报错的大意是无法获取到kafka-topi
转载
2024-01-12 12:09:47
56阅读
# Java结合Fdfs的实现指南
在当今的软件开发环境中，分布式文件存储系统逐渐成为了解决存储问题的一种有效方案。FastDFS（Fast Distributed File System）是一个开源的高性能分布式文件系统，适用于海量文件的存储和管理。本文将指导您如何使用Java与FastDFS结合，实现文件的上传、下载等基本操作。
## 流程概述
我们首先了解一下实现的整体流程，具体步骤可
原创
2024-09-05 05:20:17
57阅读
java的IO是基于流（stream）概念的，什么是流呢，作为初学者：我是这样理解的，在各个应用之间传送的是BITS，这些BIT可已被认为是流体，可以就认为是水流，那么用来在各个水源之间转移水的工具应该选择什么呢？一般情况下，水管是可以的，所以数据我将数据源比作水源，将流对象比作水管；这样就有了对流的第一步认识，它再也不神秘了。 对于流，我们要研究些什么呢，我们主要是针对应用掌握流的
# Java FDFS下载
FastDFS（Fast Distributed File System）是一个开源的轻量级分布式文件系统，它主要用于存储大容量的文件。FastDFS具有高性能、高可靠性和高扩展性的特点，被广泛应用于互联网项目中。
在Java应用程序中，可以通过使用Java FDFS客户端来实现对FastDFS文件系统的操作。本文将介绍如何使用Java FDFS客户端来下载文件，并
原创
2023-09-25 07:38:00
79阅读
在处理“java fdfs批量上传”问题时，我深入研究了整个过程，记录了每个环节的信息和逻辑。具体来说，我关注了协议背景、抓包方法、报文结构、交互过程、性能优化和安全分析等多个维度。这篇博文就是对整个过程的反思和记录，供自己和其他开发者参考。
### 协议背景
FastDFS（Fast Distributed File System）是一个开源的分布式文件系统，主要用于文件的存储和管理，尤其适
# Python连接FDFS删除文件数据
在分布式文件系统（FastDFS）中，我们经常需要通过编程语言来连接和操作文件数据。Python是一种功能强大且易于使用的编程语言，可以方便地连接到FastDFS并删除文件数据。本篇文章将介绍如何使用Python连接FastDFS，并提供代码示例。
## FastDFS简介
FastDFS是一个开源的分布式文件系统，它是以C语言开发的，并提供了多种语
原创
2023-11-24 08:43:43
116阅读
NIFI集群部署，非kerberos环境，依赖外部zookeeper.环境规划host-1 192.168.222.135 ZK NIFI
host-2 192.168.222.136 ZK NIFI
host-3 192.168.222.137 ZK NIFI
搭建时不要求与ZK共机，本次搭建资源有限，采取共机模式。1、下载相关的安装包官方网址：h
转载
2024-04-02 07:32:04
93阅读
背景本文旨在介绍通过阿里云函数计算（FC）结合日志服务 （Log Service）简单方便地搭建一套Serverless监控系统。日志服务的一个典型使用场景是将监控指标数据通过日志（json/csv 格式）的方式上传到日志服务（例如每个请求一条日志），借助日志服务强大易用的功能做索引，查询分析，制作面板功能和设置报警规则，可以花费很小的代价就能建立起监控大盘和报警系统。然而随着业务增长，当日调日志
转载
2024-09-29 10:03:37
46阅读
# Java FDFS上传文件
## 介绍
FastDFS（Fast Distributed File System）是一个轻量级的分布式文件系统，用于存储和管理大规模的文件。它是一个开源的分布式文件系统，具有高性能、高可靠性和高扩展性。
Java FDFS是FastDFS的Java客户端库，它提供了一组API用于在Java应用程序中上传和下载文件到FastDFS。在本文中，我们将介绍如何使
原创
2023-11-16 04:40:29
63阅读
# 如何在 Java 中删除 FDFS 文件
FastDFS（轻量级分布式文件系统）是一个高性能的分布式文件系统，使用 Java 来操作 FDFS 中的文件是一个常见需求。在这篇文章中，我们将详细介绍如何在 Java 中删除 FastDFS 存储的文件。以下是整个流程的概述：
## 流程概述
| 步骤 | 描述 |
|------|--------
Java整合RabbitMQ依赖<dependency>
<groupId>com.rabbitmq</groupId>
<artifactId>amqp-client</artifactId>
<version>5.12.0</version>
</dependency>1.基
转载
2023-07-22 01:06:17
415阅读
互动直播之WebRTC服务开源技术选型WebRTC 开发实践：为什么你需要 SFU 服务器 WEBRTC三种类型（Mesh、MCU 和 SFU）的多方通信架构webrtc笔记(3): 多人视频通讯常用架构Mesh/MCU/SFU多人实时互动之各WebRTC流媒体服务器的比较前言随着网络基础设施的提高，音视频实时通信越来越成为人们日常生活和工作中必不可少的需求。2011年 WebRTC的出
目录 1、集群规划2、安装JDK3、安装zookeeper4、安装clickhouse5、修改文件metrika.xml6、修改文件users.xml7、启动clickhouse集群,并设置zookeeper和clickhouse服务开启自启动1、集群规划10.1.48.12 实例1端口tcp_port 9000, http_port 8123, interserver_http_por
转载
2023-09-04 11:56:45
154阅读
1、监控度量指标 Kafka使用Yammer Metrics在服务器和Scala客户端中报告指标。Java客户端使用Kafka Metrics，它是一个内置的度量标准注册表，可最大程度地减少拉入客户端应用程序的传递依赖项。两者都通过JMX公开指标，并且可以配置为使用可插拔的统计报告器报告统计信息，以连接到
转载
2023-09-23 10:39:10
82阅读
项目终于不忙了.闲来无事,想起上次面试被人问了一个zk把我给问住了.看来要好好了解一下zk了.于是开始了zk的学习之路.首先带大家搭建一下zk集群环境,这个很简单,我就不说那么详细了,首先准备三台机器,来安装zk集群 要有root权限,因为要改hosts下载zk安装包上传到liunx服务器 我用的zookeeper.3.4.10.tar.gz &nb
转载
2023-10-07 20:01:25
98阅读
