spark去重计数操作(代码示例)
val cityUserNoAppTypeDStream = CitySummaryBolt.noAppType(cleanBoltData)
.map(x => (x, 0)).reduceByKey(_ + _).map(x => x._1).map(x => (x._1, 1l)).reduceByKey(_ + _)
作者:张瑞153169
-------------------------------------------
个性签名:独学而无友,则孤陋而寡闻。做一个灵魂有趣的人!
如果觉得这篇文章对你有小小的帮助的话,记得在右下角点个“推荐”哦,在此感谢!