如何配置Hadoop分布式集群环境

如何配置Hadoop分布式集群环境

1. 下载Hadoop

从官网下载Hadoop的源码包，解压后得到hadoop-X.X.X文件夹。

2. 配置Hadoop环境变量

打开系统环境变量配置文件，新增HADOOP_HOME环境变量，值为Hadoop安装目录。

编辑PATH环境变量，在末尾追加%HADOOP_HOME%\bin;%HADOOP_HOME%\sbin;

3. 修改Hadoop配置文件

打开etc/hadoop/hadoop-env.sh文件，修改JAVA_HOME环境变量为JDK安装目录。

打开etc/hadoop/core-site.xml文件，新增以下配置：

fs.defaultFS

hdfs://localhost:9000

打开etc/hadoop/hdfs-site.xml文件，新增以下配置：

dfs.replication

1

4. 启动Hadoop集群

打开一个命令行窗口，执行以下命令启动Hadoop集群：

start-dfs.sh

执行以下命令查看Hadoop集群状态：

jps

5. 关闭Hadoop集群

打开一个命令行窗口，执行以下命令关闭Hadoop集群：

stop-dfs.sh