设为首页 加入收藏

TOP

Spark学习(3)-Spark SQL(1)
2019-03-05 01:22:31 】 浏览:54
Tags:Spark 学习 -Spark SQL

目录:

  1. Spark SQL发展历程
  2. Spark SQL性能
  3. DateFrame介绍
  4. Spark RDD SQL 简单使用

一.Spark SQL发展历程

1.hive 到shark 再到spark sql 的演变

2.hive on spark(hive集成spark,计算效率提高,而不是仅仅依赖mapreduce)

3.spark sql实现

二.Spark SQL性能

hive sql 、shark 、 spark sql 三者性能比较

三.DateFrame介绍


四.Spark RDD SQL简单使用


使用步骤:

  1. 创建项目
  2. 引入Spark 版本对应的Spark SQL 依赖


  3. 在e盘创建一个user.json文件
  4. 编写代码
  5. 运行结果
】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇Spark与深度学习框架——H2O、dee.. 下一篇Spark学习(1)- Spark及其生态圈..

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目