摘要: 以前在学这个函数的时候,上课睡着了,哈哈哈,没注意听,讲一下agg函数的用法。 首先,你需要先知道他的使用场景,知道使用场景了你才能灵活的去运用它。 我们一般主要使用它做一下分组后的聚合操作与groupBy函数一起使用,也可以单独使用对整体进行聚合操作。 下面给大家在网上找了一段非常不错的代码: 1 阅读全文
posted @ 2021-11-09 20:11 小阿政 阅读(1573) 评论(0) 推荐(0) 编辑
摘要: 1.今天工作的时候刚知道dropduplicates对这个函数。 首先distinct和dropDuplicates都是用来进行去重的。区别在于distinct是根据每一条数据进行完整内容的比对和去重,dropDuplicates可以根据指定的字段进行去重。 下面讲一下dropDuplicates的 阅读全文
posted @ 2021-11-09 20:00 小阿政 阅读(264) 评论(0) 推荐(0) 编辑