2018年8月18日
spark的rdd详解1
摘要： 1，rdd的转换和行动操作 2，创建rdd的2种方式 1，通过hdfs支持的文件系统，没有真正把数据放rdd，只记录了一下元数据 2，通过scala的集合或者数组并行化的创建rdd 3，rdd的5大特点 1，rdd是分区的，可以指定分区数 2，算子的方法都会作用在每个分区 3，rdd之前有一系列的依 阅读全文
posted @ 2018-08-18 20:41 和美信息叶育生博文 阅读(142) 评论(0) 推荐(0) 编辑