1. 概述1）所谓HA（High Available），即高可用（7*24小时不中断服务）。2）实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制：HDFS 的HA和YARN的HA。3）Hadoop2.0之前，在HDFS集群中NameNode存在单点故障（SPOF）。4）NameNode主要在以下两个方面影响HDFS集群： NameNode机器发生意外，如宕机，集群将
转载
2023-07-19 14:12:03
88阅读
### Spring Boot搭建集群架构详细教程
作为一名经验丰富的开发者，我将会为你详细介绍如何使用Spring Boot搭建集群架构。首先，让我们来看看整个流程，然后逐步实施。
#### 整体流程
下面是搭建Spring Boot集群架构的步骤：
| 步骤 | 描述 |
| --- | --- |
| 步骤一 | 配置负载均衡服务器 |
| 步骤二 | 创建Spring Boot应用
官网下载地址：https://www.elastic.co/downloads 官网文档地址：https://www.elastic.co/guide/en/logstash/current/index.html 中文文档地址：http://udn.yyuap.com/doc/logstash-best-practice-cn/index.html1. ELK的组成部分ELK的组成部分由：elas
分布式系统方案中，集群主机数量到达一定程度后，如果还是单独的一个一个远程登陆配置会变得十分棘手。推荐两种方案：1.使用clusterShell软件配置分组，只需要在一台主机上统一的发送指令，其他主机都会执行，十分便捷。2.有时候启动的命令行一大堆，可以自己写shell去管理所有集群机子上。自定义shell脚本1.首先创建自定义的脚本script.sh文件vim /home/script.sh2.编
参考资料技术美术百人计划】图形 2.7.2 GPU硬件架构概述英伟达GPU架构演进近十年，从费米到安培cpu的基本结构及其工作原理架构对比从上图可以看出，CPU架构可以粗略的分为控制单元，存储单元和运算单元，其中数据和指令被放在存储单元中，控制单元从存储单元读取数据和指令并向对应部件发出控制信号，运算单元依据控制信号进行一系列的算数运算和逻辑运算。 对比CPU和GPU的硬件架构可以看出：在存储方面
目前机器上,oracle都是安装好的，那么我们怎么知道，之前的安装过程大概是什么样子呢？大致安装oracle集群的内容：
一、准备和配置：
1、网卡
2、ip资源
3、scanip
4、hosts
5、dns配置
6、准备rac节点，配置节点要互通
首先要保证网络的正常
二、创建用户(grid和oracle用户)
1、配置系统内核参数
2、配置这两个用户的环境变量
三、配置ASM磁盘
1、fdi
转载
2023-09-26 09:35:16
86阅读
简易搭建RocketMQ集群学习搭建rocketmq的各类集群部署搭建方式，部分内容参考官网。准备首先，来到rocketmq官网下载安装包。RocketMQ。下载完成后，解压安装包。### 解压rocketmq包
$ unzip rocketmq-all-4.7.1-bin-release.zip
### 查看，得到如下文件夹
$ ls
rocketmq-all-4.7.1-bin-release
转载
2023-08-06 13:22:04
114阅读
架构图考虑到日志系统的可扩展性以及目前的资源（部分功能复用），整个ELK架构如下：架构解读 : （整个架构从左到右，总共分为5层）第一层、数据采集层最左边的是业务服务器集群，上面安装了filebeat做日志采集，同时把采集的日志分别发送给两个logstash服务（17.162、17.163）第二层、数据处理层，数据缓存层logstash服务把接受到的日志经过格式处理，转存到本地的kafka bro
## Codis是什么？
Codis是一个基于Go语言开发的分布式Redis解决方案，可以将多个Redis实例组成一个集群，提供高可用性和性能扩展。Codis可以通过代理层将客户端的请求转发到不同的Redis节点，并提供了一些功能，如数据分片、读写分离和自动故障转移等。
## Codis的架构
Codis的架构由多个组件组成，包括Proxy、Dashboard、Coordinator和Red
原创
2023-10-03 13:12:28
52阅读
一、搭建nginx 1、配置nginx源 rpm -Uvh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch. yum search nginx 2、安装nginx yum install -y pcre-devel open
转载
2023-07-14 19:44:12
58阅读
目的 在Redis Codis 部署安装的文章中，介绍了通过fe在web上搭建codis的基本步骤和方法，也介绍了codis-admin的相关说明，为了更好的熟悉codis-admin的使用，本文将使用codis-admin直接搭建codis集群（和fe进行相关的对比）。这样做的另一个目的是为实现
转载
2019-08-14 14:13:00
393阅读
2评论
目的 在Redis Codis 部署安装的文章中，介绍了通过fe在web上搭建codis的基本步骤和方法，也介绍了codis-admin的相关说明
原创
2022-06-21 14:07:53
182阅读
SIP学习之旅【环境搭建篇】经过两天的资料收集对SIP有了初步的了解，在网络电话VOIP应用方案中很多都是采用Linux服务器部署电信级SIP Server软件或者使用专门的硬件服务器来提供SIP Server服务，客户端用SIP电话机或软电话，结构组成包括：SIP终端，代理服务器，重定向服务器，注册服务器器，鉴权服务器，SIP Server服务器等，很庞大、很复杂、很无奈（没有多余的电脑给我装L
文章目录1、机器环境2、创建用户3、系统配置免密登录关闭防火墙4、安装java5、安装RocketMQ6、配置RocketMQ集群1、配置第一组broker-a7、启动RocketMQ1、先启动nameServer。2、再启动broker3、启动状态检查4、测试mqadmin管理工具**Topic相关**：**集群相关****Broker相关****消息相关****消费者和消费者组相关**连接相
转载
2023-10-22 20:58:41
7阅读
Kafka集群文档
顺序append,
不支持随机写，顺序读写的性能非常高效
累积到一定程度或者超过一定时间再删除
将消费者信息保存在客户端而不是MQ服务器 （zookeeper）
主动pull的模型
zero-copy（nio）的方式传输， 利用sendfile（对应java里的 FileChannel.transferTo/transf
pulsar集群搭建前置条件，需要JDK环境192.168.1.1
192.168.1.2
192.168.1.3写入hosts 所有机器都需要执行$ cat >>/etc/hosts<<EOF
192.168.1.1 pulsar01 zk01
192.168.1.2 pulsar02 zk02
192.168.1.3 pulsar03 zk03JDK 所有机器都需要执行
目录一、FastDFS介绍及原理1.简介2.FastDFS协议3.存储策略4.上传过程5.文件同步6.文件下载7.小文件存储性能优化二、环境准备及安装使用的系统软件编译环境磁盘目录安装libfatscommon安装FastDFS安装fastdfs-nginx-module安装nginx单机部署tracker配置storage配置client测试配置nginx访问分布式部署tracker配置stor
转载
2023-10-08 13:13:42
498阅读
Storm集群环境搭建一、集群规划二、前置条件三、集群搭建下载并解压配置环境变量集群配置安装包分发四. 启动集群启动ZooKeeper集群启动Storm集群查看集群五、高可用验证一、集群规划这里搭建一个 3 节点的 Storm 集群：三台主机上均部署 Supervisor 和 LogViewer 服务。同时为了保证高可用，除了在 hadoop001 上部署主 Nimbus 服务外，还在 hadoo
codis-server2192.168.88.108 codis-server3192.168.88.111 codis-ha1192.168.88.112 c
原创
2022-11-27 15:02:45
118阅读
手动搭建 redis 集群redis 基本命令：启动 redis 服务：redis-server xxx.conf连接 redis 服务：redis-cli -h xx -p xx停止 redis 服务：redis-cli -p {port} shutdown单机模式主要配置：port：端口logfile：日志文件dir：redis 工作目录（存放持久化文件和日志文件）dbfilename：数据库
转载
2023-07-05 23:58:30
74阅读
