首页 > 代码库 > 高效5步走,快速搭建Hadoop2伪分布环境

高效5步走,快速搭建Hadoop2伪分布环境

       前两天将Hadoop2的完全分布式搭建文档整理发布于网上(http://blog.csdn.net/aaronhadoop/article/details/24859369),朋友相邀,就再将Hadoop2的伪分布式文档整理一下,搭建过Hadoop2完全分布式后,就笑对伪分布式”说声 呵呵吧。

       前期的jdk环境、SSH免密钥登录配置在此就不再赘述了,直接进入hadoop2的配置。本文Hadoop2配置文件路径:/usr/local/hadoop/etc/hadoop。

       开启Hadoop2模式,start now

一、修改hadoop-env.sh
export JAVA_HOME=/usr/local/jdk1.7.0_45/

二、修改core-site.xml
<property>
<name>fs.default.name</name>
<value>hdfs://hadoop0:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/usr/local/hadoop/HadoopTmpDir</value>
</property>

手动创建目录
mkdir /usr/local/hadoop/HadoopTmpDir

三、修改hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
</property>

四、修改mapred-site.xml
cp mapred-site.xml.template  mapred-site.xml
<property>
<name>mapred.job.tracker</name>
<value>hadoop0:9001</value>
</property>

五、执行命令
hdfs namenode -format

start-dfs.sh
stop-dfs.sh

start-yarn.sh
stop-yarn.sh

验证
验证方式一,查看java守护进程

验证方式二,web端




对于Hadoop2的配置及使用,建议当然还是完全分布式了,Hadoop VS Hadoop2,其中妙处,要体会,更要多言,哈哈,欢迎交流哟
OK,搞定!