摘要: 一、SparkSQL结合hive 1.首先通过官网查看与hive匹配的版本 这里可以看到是1.2.1 2.与hive结合 spark可以通过读取hive的元数据来兼容hive,读取hive的表数据,然后在spark引擎中进行sql统计分析,从而,通过sparksql与hive结合实现数据分析将成为一 阅读全文
posted @ 2018-04-08 17:54 ---江北 阅读(836) 评论(0) 推荐(0) 编辑
摘要: 一、概述 1.什么是sparkSQL 根据官网的解释: Spark SQL is a Spark module for structured data processing. 也就是说,sparkSQL是一个处理结构化数据的组件 更多的介绍,可以参见官网或者w3c:https://www.w3csc 阅读全文
posted @ 2018-04-08 17:02 ---江北 阅读(785) 评论(0) 推荐(1) 编辑
TOP