1 hadoop节点说明
- 先说明下hadoop启动后的几个进程说明(后面有案例配置secondary namenode)
namenode,简写nn 名称节点,这个是老大
datanode,简写dn,数据节点,这个是小弟,真正干活的
secondary namenode,简写snn,第二名称节点,老二,如果老大挂了,老二会顶上去
2 如何找参数
1.当我们要对hadoop进行配置时,我们怎么知道什么参数应该配置到哪个文件里呢?
第一步,打开官网,http://hadoop.apache.org,然后点击getting started
2.往下滑动,我们会看到左侧有个Configuration下面有些.xml文件
3.点击其中的core-default.xml,官网都给我们写的很清楚了,根据自己的需求进行配置即刻
4.可能又有小伙伴问,那么我怎么知道这些name和value应该配置到hadoop哪个配置文件里呢,我们看下面的图
所以,从上面的图,我们可以清晰的看出对应关系,下面通过案例演示一下
3 案例演示
下面我们要对secondary namenode的端口号进行修改,我们也不清楚secondary namenode的端口号配置应该在哪个文件里配置,那我们就先到core-default.xml里搜索下,搜索条件为secondary,因为我们是要修改第二节点的端口
从上面图可以看出,没有结果,那我们再点到hdfs-default.xml连接去搜索看看
从上图可以看到,我们在hdfs-default.xml地址下,找到了,默认端口为50090,我们看看默认端口是不是50090
下面我们先把hadoop先停止
sbin/stop-dfs.sh
然后编辑hdfs-site.xml
下图中为何配置成hadoop001,可以看我这个文章:
重新启动hadoop
重新查看secondary namenode的端口号
从上图可以看出,我们已经修改secondary namenode的端口号了