设为首页 加入收藏

TOP

Spark SQL------学习笔记
2019-03-19 13:17:46 】 浏览:40
Tags:Spark SQL------ 学习 笔记
Hive:转换成MapReduce作业;

Shark:转换成spark作业;


Hive中SQL查询的MapReduce作业转化过程

Spark三种部署方式:

Standalone;Spark on Mesos(官方推荐,更好支持);Spark on YARN;


Hadoop+Storm:


Spark Straming无法实现毫秒级流计算响应;(需要Storm)


不同的计算框架统一运行在YARN中,可以带来如下好处:
计算资源按需伸缩
不用负载应用混搭,集群利用率高

共享底层存储,避免数据跨集群迁移


】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇39-天亮大数据系列教程之SparkCor.. 下一篇SparkContext解密

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目