1 hadoop节点说明

  1. 先说明下hadoop启动后的几个进程说明(后面有案例配置secondary namenode)
    namenode,简写nn 名称节点,这个是老大
    datanode,简写dn,数据节点,这个是小弟,真正干活的
    secondary namenode,简写snn,第二名称节点,老二,如果老大挂了,老二会顶上去

2 如何找参数

1.当我们要对hadoop进行配置时,我们怎么知道什么参数应该配置到哪个文件里呢?

第一步,打开官网,http://hadoop.apache.org,然后点击getting started

hadoop论文参考文献中文 hadoop参数_xml


2.往下滑动,我们会看到左侧有个Configuration下面有些.xml文件

hadoop论文参考文献中文 hadoop参数_hadoop_02


3.点击其中的core-default.xml,官网都给我们写的很清楚了,根据自己的需求进行配置即刻

hadoop论文参考文献中文 hadoop参数_hadoop_03


4.可能又有小伙伴问,那么我怎么知道这些name和value应该配置到hadoop哪个配置文件里呢,我们看下面的图

hadoop论文参考文献中文 hadoop参数_hadoop_04


所以,从上面的图,我们可以清晰的看出对应关系,下面通过案例演示一下

3 案例演示

下面我们要对secondary namenode的端口号进行修改,我们也不清楚secondary namenode的端口号配置应该在哪个文件里配置,那我们就先到core-default.xml里搜索下,搜索条件为secondary,因为我们是要修改第二节点的端口

hadoop论文参考文献中文 hadoop参数_xml_05


从上面图可以看出,没有结果,那我们再点到hdfs-default.xml连接去搜索看看

hadoop论文参考文献中文 hadoop参数_hadoop_06


从上图可以看到,我们在hdfs-default.xml地址下,找到了,默认端口为50090,我们看看默认端口是不是50090

hadoop论文参考文献中文 hadoop参数_hadoop_07


下面我们先把hadoop先停止

sbin/stop-dfs.sh

然后编辑hdfs-site.xml

下图中为何配置成hadoop001,可以看我这个文章:

hadoop论文参考文献中文 hadoop参数_端口号_08


重新启动hadoop

hadoop论文参考文献中文 hadoop参数_端口号_09


重新查看secondary namenode的端口号

hadoop论文参考文献中文 hadoop参数_端口号_10


从上图可以看出,我们已经修改secondary namenode的端口号了