2019年6月5日
Spark Streaming的实时词频和累加词频统计
摘要： （注：运行环境是Ubuntu16， pycharm） 1、 按时段统计：获取scoket端口传输的数据（英文数据即可，方便分词），统计各个时间段内每个单词出现的次数（每个时间段都分别统计，需要使用的关键的DStream成员函数：flatMap, map, reduceByKey）。 checkpoi 阅读全文
posted @ 2019-06-05 17:25 不想长大呀呀呀呀 阅读(1363) 评论(0) 推荐(0) 编辑