摘要: 今天,这个是spark的高级算子的讲解的最后一个章节,今天我们来介绍几个简单的算子, countByKey val rdd1 = sc.parallelize(List(("a", 1), ("b", 2), ("b", 2), ("c", 2), ("c", 1)))rdd1.countByKey 阅读全文
posted @ 2016-12-29 20:32 蜗牛不爱海绵宝宝 阅读(230) 评论(0) 推荐(0) 编辑
摘要: 最近心情不是很好,但是需要调节自己,真的需要调节自己,还是要努力,这个世界有我喜欢的人,有我追求的人,也许真的是守的住寂寞,耐得住繁华吧。 不说别的了,今天我们来接受啊spark的高级算子的系列 1.map是对每个元素操作, mapPartitions是对其中的每个partition操作 2.map 阅读全文
posted @ 2016-12-29 01:59 蜗牛不爱海绵宝宝 阅读(492) 评论(0) 推荐(0) 编辑