work hard work smart

专注于Java后端开发。 不断总结，举一反三。
  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2021年2月3日

Spark SQL概述

摘要： 一、Spark SQL介绍 1、为什么需要SQL 1) 事实上的标准 2) 易学易用 3) 受众面大 2、Shark（已经停止维护，不建议在生产上使用。） Shark产生的目的就是为了让hive跑在spark之上。 Hive： 类似于sql的Hive QL语言， sql 翻译成 mapreduce 阅读全文

posted @ 2021-02-03 16:29 work hard work smart 阅读(127) 评论(0) 推荐(0) 编辑

Spark生态圈概述

摘要： Spark是一个快速且通用的集群计算平台 1、Spark概述及特点 1) Speed： 速度。执行速度快，开发速度提高了很多。 Spark扩充了流行的MapReduce计算模型 Spark是基于内存的计算。 2) Ease of User： 易用。支持多种语言,如Python，Java，Scala等 阅读全文

posted @ 2021-02-03 13:37 work hard work smart 阅读(309) 评论(0) 推荐(0) 编辑