一、在虚拟机中安装CentOS71、 启动一个虚拟机管理软件(vmware或者virtual box),准备好CentOS7的镜像,如:CentOS-7.0-1406-x86_64-DVD.iso。具体操作可参考:1.2 VirtualBox实现宿主机与虚拟机,虚拟机与外网的互通。 2、配置hosts vi /etc/hosts 配置本机的hostname到ip地址的映射 3、关闭虚拟机上的防火墙
这章将在虚拟机中的centos7系统上搭建hadoop分布式平台,从网络环境配置,到jdk环境配置,到hadoop平台的搭建。解决centos7中Network is unreachable问题,主机与虚拟机互ping不通问题,删除自带java,安装配置jdk。hadoop集群的规模:一个namenode 2个 datanode,共需要3台系统.[centos7卸载自带jdk]centos7系统在
目录测试环境Hadoop 组织框架HDFS架构YARN架构HA集群部署规划自动故障转移关于集群主机时间Linux环境搭建配置Java环境安装单机版HadoopZookeeper集群安装配置环境变量关闭防火墙修改hosts文件配置SSH免密登录修改Hadoop配置文件Hadoop集群的初始化Hadoop集群的启动测试环境Linux系统版本:CentOS 7 64位Hadoop版本:hadoop-2.
CentOS7搭建MySQL和Redis服务为什么不直接搭建高版本的呢?因为有些公司的环境就是低版本的,这些低版本的环境也需要学会如何搭建。准备工作搭建一个CentOS7系统第一步:先下载一个CentOS7的iso文件点击直接下载:https://mirror.xtom.com.hk/centos/7.9.2009/isos/x86_64/CentOS-7-x86_64-DVD-2009.iso第
下载:https://redis.io/解压:tar-xzfredis-5.0.3.tar.gz进入目录:cdredis-5.0.3编译安装:make创建配置文件夹:mkdir-p/usr/local/redis/redis_1mkdir-p/usr/local/redis/redis_2mkdir-p/usr/local/redis/redis_3mkdir-p/usr/local/redis/
原创 2019-01-06 07:54:03
2026阅读
系统环境HostnameIP应用zk-master10.15.5.240zookeeperzk-node110.15.5.241zookeeperzk-node210.15.5.242zookeeper系统版本:CentOS Linux release 7.6.1810 (Core)JDK版本:
原创 2022-02-18 16:49:20
149阅读
一、规划 主机名 主机IP 磁盘配比 角色 node1 public-ip:10.0.0.130cluster-ip:192.168.2.130 sda,sdb,sdcsda是系统盘,另外两块数据盘 ceph-deploy,monitor,mgr,osd node2 public-ip:10.
原创 2022-03-16 14:44:30
531阅读
Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。它通常被称为数据结构服务器,因为值(value)可以是 字符串(String), 哈希(Hash), 列表(list), 集合(sets) 和 有序集合(sorted sets)等类型。-redis作用:可以减轻数据库压力,查询内存比查询数据库效
原创 2021-04-09 19:15:38
102阅读
kafka集群部署
原创 2018-05-08 15:48:05
2357阅读
1点赞
CentOS7搭建Ceph集群 Ceph是一个免费、开源的分布式存储系统,可以提供高性能、高可靠性的存储解决方案。在企业和云环境中,Ceph集群已经被广泛应用。本文将介绍如何在CentOS7搭建Ceph集群,以实现可扩展的分布式存储。 首先,确保CentOS7服务器已经安装并配置好。在开始搭建Ceph集群之前,请先打开服务器终端,并确保你的服务器已经联网,并可以通过互联网访问。 以下是Ce
原创 6月前
37阅读
Ceph中文开源社区地址:http://ceph.org.cn/Ceph官方文档:http://docs.ceph.org.cn/ceph理论性的东西这里我就不说了,有兴趣的同学可以去看官方文档,我这就直接上实验过程了~机器准备HostNameIP功能
原创 2022-02-18 16:49:11
735阅读
搭建环境 系统:centos7.4 服务器金山云 安装ruby环境 [root@jsy-bj-test00 ~]# yum install -y ruby rubygems 复制6份redis服务 [work@jsy-bj-test00 ~]$ cp -rp redis redis1 [work@j
原创 2022-02-15 17:54:06
306阅读
# **使用CentOS7搭建Hadoop集群** Hadoop是一个开源的分布式计算框架,用于处理大规模数据的存储和分析。在CentOS7搭建Hadoop集群可以帮助我们更好地利用资源进行数据处理。 ## **整体流程** 可以简单的总结为以下几个步骤: | 步骤 | 操作 | |---------|------------------------------------------|
原创 3月前
25阅读
Zookeeper集群搭建 描述:本章节主要单服务器搭建集群,在一个服务器上启动多个不同端口的zookeeper服务,非真实环境。 真实环境下zookeeper集群搭建在多个物理服务器上,并非单一的服务器,但搭建方式一样。 一、zookeeper安装 教程参考:https://www.cnblog
转载 2020-01-06 15:59:00
134阅读
2评论
KubernetesKubernetes 及其整个生态系统(工具、模块、插件等)均使用 Go 语言编写,从而构成一套面向 API、可高速运行的程序集合,这些程序文档精良、易于参与贡献或在其上构建应用程序。(百度百科)那么 Kubernetes有什么用?其实很简单,Docker是部署我们的项目的容器,可是一个容器部署不够,如果在多个Linux服务器中使用Docker创建容器,这样就需要将多个Linu
转载 2021-04-09 15:44:53
236阅读
故障描述使用这个加密时候就出现Illegalkeysize错误,查阅资料知道了如果密钥大于128,会抛出上述异常。因为密钥长度是受限制的,java运行时环境读到的是受限的policy文件,文件位于/jre/lib/security下,这种限制是因为美国对软件出口的控制。Java默认使用的解密包是local_policy.jar和US_export_policy.jar,但是这个默认的只支持128位
原创 2021-04-25 11:34:32
648阅读
1点赞
KubernetesKubernetes及其整个生态系统(工具、模块、插件等)均使用Go语言编写,从而构成一套面向API、可高速运行的程序集合,这些程序文档精良、易于参与贡献或在其上构建应用程序。(百度百科)那么Kubernetes有什么用?其实很简单,Docker是部署我们的项目的容器,可是一个容器部署不够,如果在多个Linux服务器中使用Docker创建容器,这样就需要将多个Linux服务器的
原创 2021-03-02 20:14:58
224阅读
环境准备:Centos7(2核、master内存3GB、slave内存2GB)搭建概述:先将一台虚拟机搭建为master、随后克隆出两台虚拟机作为从节点虚拟机主机名和IP地址:主机名IP地址master192.168.138.110slave1192.168.138.111slave2192.168.138.1121. 虚拟机配置注:以下是配置master主节点虚拟机,slave从节点会在后续进行
原创 8月前
82阅读
# 在CentOS 7搭建Redis集群 ## 简介 Redis是一个开源的内存数据库,可以用于数据缓存、消息队列等多种用途。在分布式系统中,搭建Redis集群可以有效提高系统的性能和可靠性。本文将介绍如何在CentOS 7搭建Redis集群。 ### 步骤概览 以下是搭建Redis集群的大体步骤,具体步骤和代码示例将在下文详细说明: | 步骤 | 描述
原创 4月前
6阅读
# 搭建OpenStack集群教程 ## 一、整体流程 首先,我们来看一下搭建OpenStack集群的整体流程,具体步骤如下表所示: | 步骤 | 操作 | | ---- | ---- | | 1 | 安装CentOS 7操作系统 | | 2 | 安装OpenStack软件包 | | 3 | 配置OpenStack网络 | | 4 | 创建OpenStack服务 | | 5 | 验证Open
原创 3月前
22阅读
  • 1
  • 2
  • 3
  • 4
  • 5