虚拟机Hadoop单机安装



1、将所需要的hadoop安装包导入root用户的/etc/install/hadoop目录下,其中install和hadoop为自己新建的目录


Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_Hadoop中怎么查看虚拟机地址


2、将hadoop-2.6.0-cdh5.14.2.tar.gz解压到/etc/bigdata/hadoop目录下,并且重命名为hadoop260。bigdata和hadoop为自己新建目录。


Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hdfs_02


Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_Hadoop中怎么查看虚拟机地址_03


3、修改重命名文件的用户为root

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hadoop_04


4、在安装好的hadoop的etc/hadoop/的目录下,编辑hadoop-env.sh文件,配置jdk。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_Hadoop中怎么查看虚拟机地址_05


5、配置hadoop fs文件系统,进入安装好的hadoop的etc/hadoop/的目录下,编辑core-site.xml文件

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_Hadoop中怎么查看虚拟机地址_06


6、hadoop replicas备份,首先在与hadoop安装的同级目录下,创建一个hdfs文件夹,然后在该文件夹里再创建datanode和namenode这两个文件夹。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hadoop_07


7、进行hadoop replicas备份,在安装好的hadoop的etc/hadoop/的目录下,编辑hdfs-site.xml文件,进行备份。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_xml文件_08


8、配置hadoop mapreduce计算框架。首先将安装好的hadoop的/etc/hadoop/目下的mapred-site.xml.template文件复制到mapred-site.xml文件中。然后再编辑mapred-site.xml文件。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_xml文件_09


9、配置hadoop yarn管理调度,进入安装好的hadoop的etc/hadoop/的目录下,编辑yarn-site.xml文件

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_Hadoop中怎么查看虚拟机地址_10


10、配置hadoop slaves主机名进入安装好的hadoop的etc/hadoop/的目录下,编辑slaves文件。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hadoop_11


11、配置hadoop 环境变量,进入虚拟机的根目录的etc目录下,编辑peofile文件,然后激活环境变量配置source /etc/profile。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hdfs_12


12、配置hadoop格式化HDFS。进入安装好的hadoop的bin目录下,hdfs namenode -format 进行格式化。见到以下结果说明格式化成功。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hadoop_13


13、配置hadoop-native库,将hadoop-native-64-2.6.0.tar解压缩到已经安装好的hadoop的/lib/native/目录下。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hadoop_14


14、启动hadoop,在安装好的hadoop的bin目录下执行start-all.sh文件,开启hadoop。在这一步骤时,如果启动hadoop时要求输入虚拟机用户密码。解决方法如下,前提是各个虚拟机之间能够实现密码登录。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hdfs_15


最后再重新启动hadoop,就不需要再输入密码。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hdfs_16


15、启动jobhistory,进入已经安装安装好的hadoop的sbin目录下,开启jobhistory,然后再用jps命令查看服务状态。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_xml文件_17


16、最后浏览器访问hadopp相关端口号:50070、8088、19888

出现以结果说明,说明虚拟机安装hadoop成功。

Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_Hadoop中怎么查看虚拟机地址_18


Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hdfs_19


Hadoop中怎么查看虚拟机地址 hadoop虚拟机安装步骤_hdfs_20