首页 > 代码库 > CDH商业版本的搭建

CDH商业版本的搭建

一:准备工作

1.步骤

  1)hadoop

    -》下载解压
    -》修改配置文件
    -》hadoop-env
      JAVA_HOME
    -》core-site
      fs.defaultFS
      hadoop.tmp.dir
    -》hdfs-site
      dfs.replication
      permission
    -》mapred-site
      mapreduce.frame.work
      historyserver
    -》yarn-site
      mapreduce-》shuffle
      resourcemanager地址:0.0.0.0
      日志聚集
    -》yarn-env
      JAVA_HOME
    -》slaves
      datanode/nodemanager hostname
    -》格式化
      bin/hdfs namenode -formatf
    -》启动

  2)hive
    -》下载解压
    -》创建数据仓库
      /user/hive/warehouse
    -》修改配置
    -》hive-env
      HADOOP_HOME
      HIVE_CONF_DIR
    -》log4j
      -》日志目录
    -》hive-site
      -》连接mysql
        -》数据库地址
        -》连接驱动
        -》用户名
        -》密码
      -》显示当前数据库
      -》显示表头
    -》把mysql连接驱动放入lib
    -》启动

 

二:安装Hadoop

1.新建目录cdh-5.3.6,并修改权限

  技术分享

 

 2.解压

  技术分享

 

3.配置*env.sh中的JAVA_HOME

 

 4.配置core-site.xml环境

  技术分享

 

5.配置hdfs-site.xml环境

  技术分享

 

 6.配置mapred-site.xml

  技术分享

 

7.配置slaves

  技术分享

 

8.配置yarn-site.xml

  技术分享

 

9.格式化

  技术分享

 

10.启动

  技术分享

 

三:hive

1.解压

  技术分享

 

CDH商业版本的搭建