2021年1月7日
spark-shell报错java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProtocolBufferException:
摘要： 阅读全文
posted @ 2021-01-07 22:23 喜欢爬的孩子 阅读(685) 评论(0) 推荐(0) 编辑
spark学习进度02（集群搭建——第一个案例）
摘要： 第一步： 第二步： 第三步： 运行结果如下： spark比较擅长做迭代的操作的相关计算。 阅读全文
posted @ 2021-01-07 20:49 喜欢爬的孩子 阅读(64) 评论(0) 推荐(0) 编辑
spark学习进度01（安装环境搭建集群搭建）
摘要： 1、spark的相关特点 速度快、易用、通用、兼容 速度快::+--* Spark 的在内存时的运行速度是 Hadoop MapReduce 的100倍* 基于硬盘的运算速度大概是 Hadoop MapReduce 的10倍* Spark 实现了一种叫做 RDDs 的 DAG 执行引擎, 其数据缓存 阅读全文
posted @ 2021-01-07 20:20 喜欢爬的孩子 阅读(81) 评论(0) 推荐(0) 编辑