首页 > 代码库 > 【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(12)
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(12)
第三步:测试Spark集群
把Spark安装包下的”README.txt”上传到
通过hdfs的web控制台可以发现成功上传了文件:
使用“MASTER:spark://SparkMaster:7077 ./spark-shell”命令启动Spark shell:
接下来通过以下命令读取刚刚上传到HDFS上的“README.md”文件 :
对读取的文件进行以下操作:
接下来使用collect命令提交并执行Job:
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(12)
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。