设为首页 加入收藏

TOP

Spark1.x和spark2.x的区别
2019-02-05 01:06:51 】 浏览:119
Tags:Spark1.x spark2.x 区别
  1. DataFrame与Dataset 统一化了,只剩下DataSet了
  2. flatMapToPair 由reture list变为reture iterator
  3. ForeachRDD 不再return null
  4. 更新状态的函数中,使用的Optional来自com.google.common.base,函数不能用
  5. Spark streaming 中JavaStreamingContextFactory类 废弃
  6. Kafka 只提供direct方式
】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇Hadoop与Spark比较 下一篇spark常见问题错误 汇总

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目