摘要: 概述 Spark SQL是用于结构化数据处理的Spark模块。它提供了一个称为DataFrames的编程抽象,也可以作为分布式SQL查询引擎。 Spark SQL也可用于从现有的Hive安装中读取数据。有关如何配置此功能的更多信息,请参阅Hive Tables部分。 DataFrames DataF 阅读全文
posted @ 2017-09-05 15:55 Mr.Ming2 阅读(906) 评论(0) 推荐(0) 编辑
摘要: 一:介绍 1.在spark编译时支持hive 2.默认的db 当Spark在编译的时候给定了hive的支持参数,但是没有配置和hive的集成,此时默认使用hive自带的元数据管理:Derby数据库。 二:具体集成 1.将hive的配合文件hive-site.xml添加到spark应用的classpa 阅读全文
posted @ 2017-09-05 15:11 Mr.Ming2 阅读(596) 评论(0) 推荐(0) 编辑
摘要: 用mysql -u root -p显示ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: YES). 编辑mysql配置文件my.ini(不知道在哪请搜索),在[mysqld]这个条目下加入 s 阅读全文
posted @ 2017-09-05 09:13 Mr.Ming2 阅读(2056) 评论(0) 推荐(0) 编辑