hadoop虚拟过大 磁盘空间不足 hadoop虚拟机安装步骤

Hadoop之虚拟机创建与安装

• 模拟环境
• 虚拟机创建

• 建立Hadoop集群统一管理文件夹
• 新建虚拟机

• 虚拟机安装

• 编辑虚拟机设置
• 开始安装

• 连接XShell
• 资源设置

• 安装vim
• 安装wget
• 安装net-tools
• 更阿里镜像源

• 快照

模拟环境

1. 系统：Windows 10
2. 虚拟机：VMware 15
3. 集群系统：centos 7.6
4. 镜像：CentOS-7-x86_64-DVD-1810.iso
5. 引导模式：UEFI

虚拟机创建

建立Hadoop集群统一管理文件夹

1. 点击我的计算机-右键-新建文件夹-命名hdfs集群
2. 后期所有的虚拟机都将拖到这个文件夹内进行统一管理

新建虚拟机

点击-文件-新建虚拟机-自定义(高级)

2. 硬件兼容性：默认-workstation15.x

3. 稍候安装操作系统

4. 选择客户机操作系统-linux-centos7 64位

5. 命名虚拟机

建立E:\Virtual Machines\Linux\hdfs路径

名称：CentOS 7.6 core

路径：E:\Virtual Machines\Linux\hdfs\CentOS 7.6 core

6. 处理器配置-默认

7. 虚拟机内存分配-512Mb

本机内存要是有够的话，可以多给一点

这里使用的是最小化安装所以给512M也够用

9. 网络类型-默认

10. 选择I/O 控制器类型-默认

11. 选择磁盘类型-默认

12. 选择磁盘-默认

13. 指定磁盘容量

最大磁盘大小：20

单选：将虚拟磁盘存储为单个文件

14. 指定磁盘文件-默认-完成

15. 虚拟机列表

虚拟机安装

编辑虚拟机设置

2. 点击编辑虚拟机设置



3. 
   
5. 加载镜像
   cd/dvd-使用iso镜像文件-浏览



6. 
   
8. 选项-高级-uefi



9. 
   
10. 开机虚拟机

开始安装

2. 选择第一项



3. 
   
5. 选择语言-直接默认



6. 
   
8. 区域设置-shanghai
9. 
   
10. 默认最小化安装-minimal install
12. 磁盘分区-自定义



13. 
    
15. 标准分区-standard partition
    创建虚拟机时，如果空间给的足够大，容量可以适当增加以及设置多个分区



16. 
    
18. 确认分区



19. 
    
21. 网络



22. 
    
24. 开始安装



25. 
    
27. 设置root密码
    标准用户可创建可不创建



28. 
    
30. 创建第一个初始化快照
    重启后会进入系统，登陆-shutdown -h now(关机)
    创建一个快照以防止出现意外可进行恢复
    点击虚拟机-快照-拍摄快照



31. 
    

连接XShell

2. 打开XShell



3. 
   
5. hdfs集群文件夹
   点击文件-打开
   在会话里-右键-新建-文件夹
   创建hdfs集群文件夹
   双击进入hdfs集群文件夹



6. 
   



7. 
   
9. 在虚拟机查看ip
   输入：ip a



10. 
    
12. 新建一个会话
    点击新建



13. 
    



14. 
    



15. 
    
16. 双击进行连接

资源设置

安装vim

yum install -y vim

安装wget

yum install -y wget

安装net-tools

yum install -y net-tools

更阿里镜像源

备份原始源：mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup
下载源：wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo 生成缓存： yum makecache

快照

关机：shutdown -h now

配置完新系统后再次做一个快照

Hadoop准备阶段完完成