首页 > 代码库 > spark快速大数据分析学习笔记*初始化sparkcontext(一)
spark快速大数据分析学习笔记*初始化sparkcontext(一)
初始化SparkContext
1// 在java中初始化spark 2 import org.apache.spark.SparkConf; 3 import org.apache.spark.api.java.JavaSparkContext; 4 5 SparkConf conf=new SparkConf().setMaster("local”).setAppName("my app"); 6 //集群url:本例是运行在本地单机local;应用名,可以在集群管理器用户界面中找到你的应用 7 JavaSparkContext sc=new JavaSparkContext(conf);
关闭spark可以用SparkContext的stop()方法,或直接退出应用,如System.exit(0)或sys.exit()
参考《spark快速大数据分析》
spark快速大数据分析学习笔记*初始化sparkcontext(一)
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。