hadoop2.7.1伪分布式配置

原创

千寻22 2022-09-10 00:44:32 ©著作权

文章标签 hadoop xml hdfs 文章分类 运维

©著作权归作者所有：来自51CTO博客作者千寻22的原创作品，请联系作者获取转载授权，否则将追究法律责任

Hadoop 可以在单节点上以伪分布式的方式运行，Hadoop 进程以分离的 Java 进程来运行，节点既作为 NameNode 也作为 DataNode。

Hadoop 的配置文件位于 /usr/local/hadoop/etc/hadoop/ 中，伪分布式需要修改3个配置文件 core-site.xml 、hdfs-site.xml和 mapred-site.xml 。Hadoop的配置文件是 xml 格式，每个配置以声明 property 的 name 和 value 的方式来实现。

core-site.xml文件

<configuration>
    <property>
        <name>fs.default.name</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

hdfs-site.xml文件

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

mapred-site.xml文件

如何没有这个文件使用mapred-site.xml.template文件，

修改后在重命名为mapred-site.xml

<configuration>
   <property>
       <name>mapred.job.tracker</name>
       <value>localhost:9001</value>
   </property>
</configuration>

配置完成后，执行 namenode 的格式化:

bin/hadoop namenode -format

成功标识：

显示 Exiting with status 0