Hadoop2.4.1如何实现伪分布式搭建

如何实现伪分布式搭建

伪分布式搭建是指将hadoop的namenode和datanode都放在一台机器上。伪分布式搭建通常用于hadoop的开发和测试，因为它可以节省硬件成本。

要实现伪分布式搭建，需要修改hadoop的配置文件，具体步骤如下：

1. 修改hadoop的namenode配置文件（hdfs-site.xml）

将namenode的配置文件中的dfs.namenode.secondary.http-address改为0.0.0.0:0，表示不启动secondary namenode。

2. 修改hadoop的datanode配置文件（hdfs-site.xml）

将datanode的配置文件中的dfs.datanode.data.dir改为file:///tmp/hadoop/data，表示数据将存储在本地文件系统上。

3. 修改hadoop的namenode配置文件（core-site.xml）

将namenode的配置文件中的fs.defaultFS改为hdfs://localhost:9000，表示namenode将运行在本地主机上。

4. 修改hadoop的resourcemanager配置文件（yarn-site.xml）

将resourcemanager的配置文件中的yarn.resourcemanager.resource-tracker.address改为localhost:0，表示不启动resourcemanager。

5. 修改hadoop的nodemanager配置文件（yarn-site.xml）

将nodemanager的配置文件中的yarn.nodemanager.aux-services改为mapreduce_shuffle，表示只启动nodemanager。

6. 启动hadoop

在hadoop目录下执行命令bin/hadoop namenode -format，然后执行命令sbin/start-dfs.sh启动hadoop。