首页 > 代码库 > 阿里云EMR集群初始化后的开发准备工作
阿里云EMR集群初始化后的开发准备工作
前言:EMR的集群使用越来越普遍,但是每一次的集群释放到集群的重新创建,期间总有一些反复的工作需要查询与配置。为方便后续工作查阅,现在对集群初始化后的工作进行大概的梳理如下。
step1: 登录阿里云查看集群主节点分配的公网IP
step2: 若之前有进行外网访问权限的设置,设置安全组白名单 (while-list)
step3:登录EMR节点,更改hadoop用户的登录密码(建议用部署用户进行emr任务的操作,root用户慎用!)
[hadoop@emr-header-1 emr]$ hadoop fs -ls /
Found 3 items
drwxr-xr-x - hadoop hadoop 0 2017-05-20 11:02 /apps
drwxr-xr-x - hadoop hadoop 0 2017-05-20 16:18 /spark-history
drwxrwxrwx - hadoop hadoop 0 2017-05-20 11:03 /tmp
step4: 查询或修改集群的配置信息
$ ll /etc/emr/
$ ll /opt/apps/
阿里云EMR集群初始化后的开发准备工作
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。