2020年9月15日
spark 自定义 accumulator
摘要： 默认的accumulator 只是最简单的 int/float 有时候我需要一个map来作为accumulator 这样，就可以处理 <string, int>类型的计数了. 此外我还需要这个map 的key 可以在超出一定时间后自动删除，类似于 Redis 的 expiry, 然后还要知道expi 阅读全文
posted @ 2020-09-15 11:00 mashuai_191 阅读(145) 评论(0) 推荐(0) 编辑