CentOS 安装单机 Hadoop
1. 概述
本文将介绍如何在 CentOS 操作系统上安装单机版 Hadoop。Hadoop 是一个开源的分布式计算平台，适用于大规模数据集的存储和处理。通过本文，您将学习到如何安装 Hadoop，以及如何进行基本的配置。
2. 安装流程
下面是安装单机版 Hadoop 的流程图：
flowchart TD
A[准备环境]
B[下载并解压 Hadoop]
C[配置环境变量]
D[配置 Hadoop]
E[启动 Hadoop]
F[验证安装]
A --> B --> C --> D --> E --> F
接下来，我们将逐步介绍每个步骤的具体操作。
3. 准备环境
在开始安装之前，确保您的 CentOS 操作系统已经安装并配置好。另外，您需要使用具有管理员权限的用户来执行以下操作。
4. 下载并解压 Hadoop
在终端中执行以下命令来下载 Hadoop，并解压到指定的目录：
# 创建目录
mkdir -p /opt/hadoop
# 下载 Hadoop
wget
# 解压 Hadoop
tar -xzvf hadoop-3.3.0.tar.gz -C /opt/hadoop --strip-components=1
5. 配置环境变量
为了方便使用 Hadoop 命令，我们需要将 Hadoop 的可执行文件路径添加到环境变量中。编辑 ~/.bashrc 文件，并在末尾添加以下内容：
export HADOOP_HOME=/opt/hadoop
export PATH=$HADOOP_HOME/bin:$PATH
然后运行以下命令使环境变量生效：
source ~/.bashrc
6. 配置 Hadoop
在安装 Hadoop 之前，我们需要对 Hadoop 进行一些基本的配置。首先，进入 Hadoop 的安装目录：
cd /opt/hadoop
然后，编辑 etc/hadoop/core-site.xml 文件，添加以下内容：
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
接下来，编辑 etc/hadoop/hdfs-site.xml 文件，添加以下内容：
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
最后，编辑 etc/hadoop/mapred-site.xml 文件，添加以下内容：
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
7. 启动 Hadoop
使用以下命令启动 Hadoop：
start-dfs.sh
start-yarn.sh
8. 验证安装
在浏览器中访问 http://localhost:9870，您将看到 Hadoop 的管理页面。这意味着 Hadoop 已经成功安装并运行。
9. 总结
通过本文，您学习了如何在 CentOS 操作系统上安装单机版 Hadoop。安装的过程包括准备环境，下载并解压 Hadoop，配置环境变量，配置 Hadoop，启动 Hadoop，以及验证安装。
希望本文对您有所帮助，祝您在使用 Hadoop 进行分布式计算时取得成功！
附录：类图
classDiagram
class CentOS {
+String version
+installSoftware()
}
class Hadoop {
+String version
+install()
+configure()
+start()
}
class User {
+String name
+install(hadoop: Hadoop)
+configure(hadoop: Hadoop)
+start(hadoop: Hadoop)
}
CentOS --> Hadoop : <<依赖>>
User --> Hadoop : <<使用>>
以上是本文中涉及到的类图，其中 CentOS 类表示 CentOS 操作系统，Hadoop 类表示
