莫思身外无穷事,且尽生前有限杯。
——杜甫《绝句漫兴九首》

系列文章目录

Hadoop集群搭建之Linux系统安装
Hadoop集群搭建之Hadoop组件安装



文章目录

  • 系列文章目录
  • 前言
  • 一、CentOS下载安装
  • 二、VMware下载安装
  • 三、利用虚拟机搭建Linux系统
  • 总结



前言

记录Hadoop集群搭建的具体过程,分享我遇到的坑,如有错误,请各位小伙伴指正,持续更新中。


一、CentOS下载安装

  1. 在官网下载镜像,CentOS官网
  2. 点击网页上方选项栏中的Download选项,进行下载页面。
  3. 选择对应的版本包,比如x86,选择RPMs,进入镜像页面。
  4. 在镜像页面中选择isos目录
  5. 进入isos目录后,选择x86_64
  6. 选一个镜像,我这里选择阿里云的镜像。
  7. 目前最新版本是7.9,点击直接下载,下文将介绍在虚拟机中如何安装。

二、VMware下载安装

  1. 在官网下载VMware,VMware官网
  2. 官网首页并没有下载相关的选项可以直接进入下载也,需要先点击网页上方选项栏中的Workspace
  3. hadoop集群上安装spark 如何安装hadoop集群_大数据


  4. 选择桌面Hpervisor中的Workstation Pro(Pro版本为专业版,可试用30天,小伙伴们自行网上找激活,也可以选择Workstation Player版本,该版本为社区版免费,但会少一些功能)
  5. hadoop集群上安装spark 如何安装hadoop集群_hadoop集群上安装spark_02


  6. 进入Workstation Pro页面后滚动下滑页面可以选择下载试用版。
  7. hadoop集群上安装spark 如何安装hadoop集群_hadoop集群上安装spark_03


  8. hadoop集群上安装spark 如何安装hadoop集群_CentOS_04


  9. 下滑试用版页面选择window版本进行下载
  10. hadoop集群上安装spark 如何安装hadoop集群_hadoop_05


三、利用虚拟机搭建Linux系统
  1. 打开我们上面下载好的VMware,选择创建虚拟机。
  2. hadoop集群上安装spark 如何安装hadoop集群_大数据_06


  3. 本文使用自定义安装
  4. hadoop集群上安装spark 如何安装hadoop集群_hadoop_07


  5. 兼容性为默认配置,直接下一步。
  6. hadoop集群上安装spark 如何安装hadoop集群_hadoop集群上安装spark_08


  7. 选择是否直接安装上面下载的CentOS镜像,本文选择稍后安装。
  8. hadoop集群上安装spark 如何安装hadoop集群_hadoop_09


  9. 选择Linux,CentOS7 64位
  10. hadoop集群上安装spark 如何安装hadoop集群_hadoop_10


  11. 虚拟机配置,根据自己的物理机情况配置,可以打开任务管理器在性能选项栏中查看自己主机的配置。
  12. hadoop集群上安装spark 如何安装hadoop集群_hadoop_11


  13. hadoop集群上安装spark 如何安装hadoop集群_CentOS_12


  14. 选择合适的内存
  15. hadoop集群上安装spark 如何安装hadoop集群_CentOS_13


  16. 默认网络类型、I/O和磁盘类型
  17. hadoop集群上安装spark 如何安装hadoop集群_hadoop_14


  18. hadoop集群上安装spark 如何安装hadoop集群_hadoop_15


  19. hadoop集群上安装spark 如何安装hadoop集群_hadoop_16


  20. 配置硬盘,本文选择40G
  21. hadoop集群上安装spark 如何安装hadoop集群_大数据_17


  22. hadoop集群上安装spark 如何安装hadoop集群_hadoop_18


  23. hadoop集群上安装spark 如何安装hadoop集群_大数据_19


  24. 确认信息,完成虚拟机配置。
  25. hadoop集群上安装spark 如何安装hadoop集群_hadoop_20


  26. 点击CD/DVD,选择上文下载的CentOS所在路径,安装CentOS。
  27. hadoop集群上安装spark 如何安装hadoop集群_大数据_21



总结

莫思身外无穷事,且尽生前有限杯。出自杜甫的《绝句漫兴九首》,意为不要想身外无数的事情,先饮尽眼前的不多的酒。
恰似本文,记录的是虚拟机和CentOS的下载和安装,这部分是集群搭建的基础也是比较简单的部分,先把这部分做好,明天继续接下来的搭建。