首页 > 代码库 > spark(四)
spark(四)
一、 spark 2 版本 相对于以前版本的变化
spark core :
Accumulators (累加器):性能更好,页面上也可以看到累加器的信息
spark sql:
1、
2、DataSet(合并了之前的dataFrame)
spark 2 里面没有dataframe了,dataframe只是dataset的一部分
3、对sql语句的支持更好
在spark 1.x的时候是不支持子查询。但是spark2 的时候可以了
二、spark 为什么由 1 升级到 2
spark(四)
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。