8.SparkSQL综合作业
摘要：综合练习：学生课程分数 网盘下载sc.txt文件，分别创建RDD、DataFrame和临时表/视图； 分别用RDD操作、DataFrame操作和spark.sql执行SQL语句实现以下数据分析: 导入文件 1.总共有多少学生？ 2.总共开设了多少门课程？ 3.每个学生选修了多少门课？ 4.每门课程有
阅读全文
posted @
2022-05-27 14:11
云往前面飘
阅读(38)
推荐(0) 编辑
Spark SQL
摘要：1.分析SparkSQL出现的原因，并简述SparkSQL的起源与发展。 SparkSQL出现的原因 hive是shark的前身，shark是sparkSQL的前身，sparkSQL产生的根本原因是其完全脱离了hive的限制，hive是hive SQL转换成MapReduce然后提交到集群上执行，大
阅读全文
posted @
2022-05-11 10:13
云往前面飘
阅读(122)
推荐(0) 编辑
