Fork me on GitHub
2018年1月7日
Spark算子篇 --Spark算子之combineByKey详解
摘要： 一。概念 二。代码 三。解释 第一个函数作用于每一个组的第一个元素上，将其变为初始值 第二个函数：一开始a是初始值，b是分组内的元素值，比如A[1_],因为没有b值所以不能调用combine函数，第二组因为函数内元素值是[2_,3]调用combine函数后为2_@3，以此类推 第三个函数：reduc 阅读全文
posted @ 2018-01-07 00:01 L先生AI课堂 阅读(4772) 评论(0) 推荐(0) 编辑