首页 > 代码库 > Hadoop学习笔记一
Hadoop学习笔记一
第一个hands-on入门程序:
参考 http://blog.csdn.net/sim_szm/article/details/12578055 搭建环境并跑WordCount程序,区别是我安装的是最新的hadoop版本0.23.11,JDK我使用的是Sun JDK,Linux使用的是国产的Kylin。
问题一:Error: JAVA_HOME is not set and could not be found.
解决方案:
/etc/profile 文件中export JAVA_HOME
${HADOOP_HOME}/libexec/hadoop-config.sh 显式export JAVA_HOME
${HADOOP_HOME}/etc/hadoop/yarn-env.sh 显式export JAVA_HOME
问题二:NameNode 没有启动
解决方案:
删除core-site.xml文件中配置的tmp目录
运行 hadoop namenode -format 命令
再运行sbin目录下的start-dfs.sh脚步启动NameNode和datanode
问题三:为何需要SSH
解决方案:Hadoop集群成员的通讯机制都是使用SSH,即使是单机环境,内部脚本也会运行 ssh localhost进行处理,所以安装SSH是必须的。
本文出自 “力量来源于赤诚的爱!” 博客,请务必保留此出处http://stevex.blog.51cto.com/4300375/1535193
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。