Fork me on GitHub
2020年5月13日
Spark实战 - 如何进行选择去重
摘要： 背景 业务上有一份行车轨迹的数据 carRecord.csv 如下： 其中各字段含义分别为记录id，车牌号，抓拍卡口，抓拍时间。现在需要筛选出所有车辆最后出现的一条记录，得到每辆车最后经过的抓拍点信息，也就是要将其他日期的数据过滤掉，我们可以使用选择去重。下面分别展示通过 dataframe 和 r 阅读全文
posted @ 2020-05-13 22:00 stillcoolme 阅读(2498) 评论(0) 推荐(0) 编辑