<hr style=" border:solid; width:100px; height:1px;" color=#000000 size=1">

前言

<font color=#999AAA >本文主要记录大数据环境准备及hadoop和zookeeper集群搭建,服务器方面不缺钱可以直接买阿里云的ecs,这里用VmWare虚拟机作为示例。</font>

<hr style=" border:solid; width:100px; height:1px;" color=#000000 size=1">

<font color=#999AAA >提示:以下是本篇文章正文内容,下面案例可供参考

一、 三台linux服务器的安装

1. 安装VmWare

  • VMWare虚拟机软件是一个“虚拟PC”软件,它使你可以在一台机器上同时运行二个或更多Windows、DOS、LINUX系统。与“多启动”系统相比,VMWare采用了完全不同的概念。
  • 我们可以通过Vmware来安装我们的linux虚拟机,然后通过linux虚拟机来进行集群的安装,Vmware的安装双击之后,一路下一步即可,尽量不要装在操作系统盘里面了,Vmware的安装步骤省略。

2. 通过Vmware安装第一台linux机器

  • 我们通过Vmware可以安装第一台我们的linux机器,接下来我们来看如何通过VMWare创建linux虚拟机,并给我们的虚拟机挂载操作系统

1:双击Vmware打开之后,点击创建新的虚拟机 大数据服务器环境准备(三台服务)_hadoop 2:选择自定义安装配置 大数据服务器环境准备(三台服务)_hadoop_02大数据服务器环境准备(三台服务)_zookeeper_03 3:选择稍后安装操作系统 大数据服务器环境准备(三台服务)_hadoop_04大数据服务器环境准备(三台服务)_hadoop_05 5:选择安装路径,==尽量不要放在C盘,并且所在盘符的剩余空间尽量大些== 大数据服务器环境准备(三台服务)_zookeeper_06 6:CPU核数,默认即可 大数据服务器环境准备(三台服务)_zookeeper_07 7:虚拟机内存根据自身windows电脑进行调整 例如如果windows是8GB内存,那么每台虚拟机内存给2048M内存,如果windows是16GB内存,那么每台虚拟机可以给4096M内存即可(强烈建议16G,不然后面导大量数据的时候容易挂) 大数据服务器环境准备(三台服务)_zookeeper_08 8:网络配置一定要选择==NAT== 大数据服务器环境准备(三台服务)_zookeeper_09大数据服务器环境准备(三台服务)_zookeeper_10大数据服务器环境准备(三台服务)_hadoop_11 9:磁盘大小尽量给40GB或以上 大数据服务器环境准备(三台服务)_zookeeper_12 注意:千万==不要==勾选“立即分配所有磁盘空间” 大数据服务器环境准备(三台服务)_hadoop_13大数据服务器环境准备(三台服务)_zookeeper_14 10:完成 大数据服务器环境准备(三台服务)_hadoop_15

3. 为我们创建的linux虚拟机挂载操作系统

  • 我们现在已经有了一台虚拟电脑了,就类似我们刚刚买了一台电脑回来,只不过不同的是我们这台虚拟电脑还没有操作系统我们需要为这台电脑挂在操作系统出来 1:通过设置来挂载操作系统 大数据服务器环境准备(三台服务)_zookeeper_16 需要自行下载64位Centos7的操作系统 大数据服务器环境准备(三台服务)_hadoop_17大数据服务器环境准备(三台服务)_zookeeper_18 2:直接回车开始安装 大数据服务器环境准备(三台服务)_hadoop_19 3:设置键盘为英文键盘 大数据服务器环境准备(三台服务)_zookeeper_20 4:接下来配置这三项 大数据服务器环境准备(三台服务)_hadoop_21 (1)设置①时区为Asia/Shanghai 大数据服务器环境准备(三台服务)_hadoop_22(2)设置②INSTALATION DESTINATION 大数据服务器环境准备(三台服务)_hadoop_23 (3)设置③NETWORK & HOST NAME 大数据服务器环境准备(三台服务)_zookeeper_24 5:设置root用户密码 大数据服务器环境准备(三台服务)_zookeeper_25 6:安装完成之后重启reboot即可 此过程稍长,耐心等待 大数据服务器环境准备(三台服务)_hadoop_26

4. 为我们的linux虚拟机设置网络配置

  • 我们的linux虚拟机已经创建并挂载好了操作系统,接下来我们可以为我们的第一台虚拟机来设置网络地址了,设置网络地址比较麻烦。

1:设置虚拟机的网段 大数据服务器环境准备(三台服务)_hadoop_27 2:查看==NAT模式==的网关,子网IP以及子网掩码 大数据服务器环境准备(三台服务)_zookeeper_28 3:设置window当中的VMNet8网络地址 大数据服务器环境准备(三台服务)_zookeeper_29大数据服务器环境准备(三台服务)_zookeeper_30 4:设置linux当中的网络

  • 我们已经配置好了Vmware当中的网络、windows当中的网络;
  • 剩下就是配置linux虚拟机当中的网络,配置好了linux当中的网络,我们的linux就可以联网使用了
  • 登录linux

大数据服务器环境准备(三台服务)_hadoop_31 编辑配置文件

vi /etc/sysconfig/network-scripts/ifcfg-ens33


添加联网四要素

IPADDR=192.168.52.100
NETMASK=255.255.255.0
GATEWAY=192.168.52.1
DNS1=8.8.8.8


具体参考下图 大数据服务器环境准备(三台服务)_hadoop_32 更改完成配置,重启网络服务

systemctl restart network


安装一些常用的软件

yum -y install vim
yum -y install net-tools


关机

init 0


5. 克隆第一台机器

  • 现在我们已经有了种子机器了,我们可以通过种子机器进行复制或者克隆出三台机器
  • 关闭linux种子机器,然后准备进行克隆 大数据服务器环境准备(三台服务)_hadoop_33

大数据服务器环境准备(三台服务)_hadoop_34大数据服务器环境准备(三台服务)_hadoop_35 选择创建完整克隆 大数据服务器环境准备(三台服务)_zookeeper_36大数据服务器环境准备(三台服务)_zookeeper_37

6. 更改克隆机器的IP地址

  • 三台机器的ip地址分别是192.168.52.100、192.168.52.110、192.168.52.120
  • 克隆出来的机器IP地址与种子的ip地址一样,我们将第二台机器的IP地址更改为192.168.52.110即可
  • 启动虚拟机,并通过root用户,密码123456来进行登录,然后来更改linux机器的IP地址
vi /etc/sysconfig/network-scripts/ifcfg-ens33
IPADDR=192.168.52.110
NETMASK=255.255.255.0
GATEWAY=192.168.52.1
DNS1=8.8.8.8


  • 依照上面步骤,接着克隆第三台机器,并将第三台机器的IP地址设置为 192.168.52.120

<font color='red'>建议:三台机器准备好后,打个快照,便于出错后恢复</font>

总结

<font color=#999AAA >提示:至此,大数据的服务器环境就全部准备完成了,接下来就可以开始搭建3节点的hadoop和zookeeper的集群了。