Spark中的CombineKey()详解
摘要:
CombineKey()是最常用的基于键进行聚合的函数,大多数基于键聚合的函数都是用它实现的。和aggregate()一样,CombineKey()可以让用户返回与输入数据的类型不同的返回值。要理解CombineKey()需要先理解它在数据处理时是如何处理每个元素的。由于CombineKey()会遍 阅读全文
posted @ 2019-04-29 09:44 herman很慢 阅读(943) 评论(0) 推荐(0) 编辑