上篇文章介绍了怎么部署搭建Puppet:http://msiyuetian.blog.51cto.com/8637744/1745416下面这篇文章主要介绍另外一个运维自动化工具 Saltstack 。一、简介Saltstack 比 Puppet 出来晚几年,是基于Python 开发的,也是基于 C/S 架构,服务端 master 和客户端 minions ;Saltstack 和 Pu
原创
精选
2016-02-28 16:37:33
6180阅读
点赞
4评论
KVM部署搭建
原创
2017-12-08 17:30:03
1062阅读
点赞
文章原址:http://msiyuetian.blog.51cto.com/8637744/1745785
转载
精选
2016-03-02 11:30:10
218阅读
puppet 是基于 rubby开发,C/S架构,支持多平台,可以管理配置文件、用户、cron任务、软件包、系统服务等。分为社区免费版和企业收费版,企业版支持图形化配置。一、安装和配置1、准备工作准备两台机器,这两台机器都关闭 selinux,清空 iptables 规则并保存。master:192.168.0.109slaver:192.168.0.1102、编辑 hosts 文件两台都设置,若
原创
精选
2016-02-26 19:24:40
2869阅读
一、HDFS实验:部署HDFS指导2.1 实验目的1. 理解HDFS存在的原因;2. 理解HDFS体系架构;3. 理解master/slave架构;4. 理解为何配置文件里只需指定主服务、无需指定从服务;5. 理解为何需要客户端节点;6. 学会逐一启动HDFS和统一启动HDFS;7. 学会在HDFS中上传文件。2.2 实验要求要求实验结束时,已构建出以下HDFS集群:1. master
转载
2024-03-05 08:17:09
82阅读
大数据环境部署一(hdfs集群搭建)
大数据分析使用的数据源是shp文件,目前存储方案是存储在HDFS中。Hdfs文件服务器部署起来比较简单,简述一下。
hdfs版本选择比较随意,3.x都可以。
hdfs部署正常情况下10分钟就够了,需要注意的就是免密登录哪里,不要随便chomd权限,不然会很麻烦的。
如果是新机器,几乎不需要改权限就可以正常部署。1:安装软件和前提环境服务器:c
转载
2023-07-13 16:57:12
184阅读
文章目录Hadoop简介:大数据4V特征:Hadoop三大核心:Hadoop4大特征:Hadoop与普通数据库差别:HDFS环境搭建: Hadoop简介:大数据4V特征:Volume: 90%的数据是过去两年产生----大数据量Velocity: 数据增长速度快,时效性高----速度快Variety: 数据种类和来源多样化:结构化数据,半结构化数据,非结构化数据----多样化Value: 需挖掘
转载
2024-04-15 11:43:01
42阅读
hadoop 2.7.7 完全分布式 + hive 2.3.4
原创
2021-12-03 14:05:21
210阅读
1. 安装的前期准备
Hadoop集群启动成功
Zookeeper集群启动成功
2. kafka的搭建
在master,s201,s203搭建kafka分布式系统
1. 下载 kafka_2.13-2.6.0.tgz
cd /home/fzy/soft/kafka
2. XX
3. 解压到指定目录
tar -zxvf kafka_2.13-2.6.0.tgz -C /opt/progr
原创
2023-09-17 10:44:08
142阅读
安装 keepalived + nginx 192.209.233.104 nginx01 192.209.233.105 nginx02 192.168.200.18 vip1、安装软件yum -y install keepalived ipvsadm2、配置nginx01cat > /etc/keepalived/keepalived.c
官网:https://dev.mysql.com/downloads/cluster/ 实操:https://cloud.tencent.com/developer/article/1346529 https://cloud.tencent.com/developer/article/1346529 ...
转载
2021-09-17 19:38:00
148阅读
2评论
1、openstack各组件介绍Nova:计算服务,通过虚拟化技术,实现虚拟机的创建,管理,删除,是openstack中最核心的服务;Neutron:网络服务,为虚拟机提供网络连接服务,就像物流的交换机和路由器一样;Glance:镜像服务,管理镜像模板的仓库,为虚机提供镜像模板;Cinder:块存储服务,为虚拟机提供额外的硬盘;Keystone:认证服务,为openstack各组件提供认证和授权功
原创
2017-08-14 16:14:44
1035阅读
在Kubernetes(K8S)中,部署Nginx集群是一个常见的需求,可以提高网站的性能和可靠性。在这篇文章中,我将向你解释如何实现nginx集群部署搭建。
首先,我们需要了解整个部署流程。下面是我总结的nginx集群部署搭建的步骤表格:
| 步骤 | 操作 |
|-----|-----------------------|
| 1 | 创建一个pod
原创
2024-05-15 10:50:59
115阅读
一、 MySQL集群版MySQL 数据库作为最受欢迎的开源数据库,通常在一般项目中使用单机版或者主从库的方式即可满足常见的项目需求,本次项目有额外的高可用需求,因此采用了集群版数据库的搭建。相比主从的优势在于,多节点单独挂一台,不会影响业务系统正常使用,而主从的方式只要主库挂了,其他从库也会不可用。集群版有三种类型节点:管理节点、数据节点、sql节点。管理节点:顾名思义,用于管理其他节点
ELK 部署 主节点 俩台服务器, 这是主服务器 安装 JAVA 环境 yum list java*yum list java-1.8*yum install java-1.8.0-openjdk* -yjava -version 配置防火墙规则 firewall-cmd --add-port=92 ...
转载
2021-07-23 16:44:00
216阅读
2评论
Openstack部署搭建实验目标理解Openstack的基本概念与架构掌握Openstack部署流程能够搭建一个包含基本组件的Openstack环境实验环境虚拟机软件:VMware Workstation操作系统:Ubuntu 20.04实验步骤步骤1、环境准备安装虚拟化软件,并创建一台虚拟机,配置如下图2.安装ubuntu系统3.语言选择English4.选择中间的选项,不更新5.
原创
精选
2024-03-04 20:34:12
2323阅读
在Kubernetes环境下部署GitLab集群是一个常见的需求,可以提高GitLab的可用性和性能。下面我将向你介绍如何实现"gitlab集群部署搭建"。首先,我们来整理一下整个流程的步骤:
| 步骤 | 操作 |
| ---- | ---- |
| 1 | 在Kubernetes集群中部署GitLab Helm Chart |
| 2 | 配置GitLab集群 |
| 3 | 部署外部访问控
原创
2024-05-28 11:48:48
306阅读
一、基本概念介绍Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能,但具有自己独特的设计。这个独特的设计是什么样的呢?首先让我们看几个基本的消息系统术语:Kafka将消息以topic为单位进行归纳。将向Kafka topic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行,可以由一个或多个服务组成
原创
2017-07-14 11:42:16
1381阅读
点赞
1评论
1.1 使用serverless环境搭建在实践demo之前,我们需要注册一个AWS账号,AWS提供了一年的免费使用。去官网注册下(https://aws.amazon.com/cn/)1.2 安装 serverless首先我们需要安装serverless框架,如下命令:npm install -g serverless使用命令如下所示:serverless create --templa
转载
2024-03-15 13:36:26
121阅读
本文将详细介绍如何使用 Docker Compose 安装 RabbitMQ 集群,并进行功能验证。我们将搭建一个包含三个节点的 RabbitMQ 集群,以实现高可用性和负载均衡。一、准备工作安装 Docker 和 Docker Compose:请确保您的服务器上已经安装了 Docker 和 Docker Compose。如果尚未安装,请参考 Docker 官方文档进行安装。创建工作目录:在服务器
转载
2024-09-28 21:02:56
34阅读