随笔分类 -  spark

应用
spark的简单说明
摘要：一个引擎：spark --目前我们使用的查询引擎是hivesql，其实是MapReduce，也就是那个java程序。--这个引擎效率不高，所以考虑使用高效的查询引擎处理数据。 --spark就是一个基于内存计算的高效的查询引擎，可以用它查询hive中的表--我们使用spark-sql spark-s 阅读全文
posted @ 2022-05-08 19:23 潜摩羯 阅读(72) 评论(0) 推荐(0) 编辑