2018年6月8日

Spark的word count

摘要: word count 注意spark的套路: 1. 创建配置配置,创建sparkcontext; 2. 获取数据源; 3. flatmap进行元素独立; 4. filter进行过滤; 5. map封装为元组; 6. reduce进行计数; 按照数量排序 你可以采用一条龙的方式来进行上述实现,感觉那是 阅读全文

posted @ 2018-06-08 11:41 下士闻道 阅读(392) 评论(0) 推荐(0) 编辑

导航