2017 年 10月 12 日随笔档案 - soyosuyang

2017年10月12日

摘要：结果： NowDate：结果类似为：2017-10-12 20:14:5714:5715:0300:06 (差值结果）阅读全文

posted @ 2017-10-12 20:24 soyosuyang 阅读(3777) 评论(0) 推荐(0) 编辑

摘要： 1. 两者分别是什么？ Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不能够进行交互查询--因为它只能阅读全文

posted @ 2017-10-12 15:57 soyosuyang 阅读(175) 评论(0) 推荐(0) 编辑

Spark SQL 操作Hive 数据

摘要：结果：+ + +|key| value|+ + +|238|val_238|| 86| val_86||311|val_311|| 27| val_27||165|val_165||409|val_409||255|val_255||278|val_278|| 98| val_98||484|val 阅读全文

posted @ 2017-10-12 15:28 soyosuyang 阅读(1356) 评论(0) 推荐(0) 编辑

Spark SQL读parquet文件及保存

摘要：补充：需要多数据源整合查询时： val data=result1.union(result2) data.createOrReplaceTempView("data") 之后执行后续查询阅读全文

posted @ 2017-10-12 15:20 soyosuyang 阅读(5611) 评论(0) 推荐(1) 编辑

soyosuyang

公告