随笔分类 -  数据分析

常用工具
摘要：判断B列是否在A列数据中 在Numbers 中使用 COUNTIF(待检验阵列,条件) B列元素是否在A中,待校验阵列为A列，条件为B列中的每个元素 统计每个元素出现的次数 在Numbers 中使用 COUNTIF(待检验阵列,条件) 统计A列中每个元素出现的次数, 待校验阵列为 A列中所有元素，条 阅读全文
posted @ 2022-03-21 19:08 Paualf 阅读(30) 评论(0) 推荐(0) 编辑
写可测试的代码，重视工程质量
摘要：需求： 查找出出现频次最高的城市对应的id 涉及到公司内部表结构和字段信息，具体SQL就不贴出来了 一开始自己写了一版SQL，因为时间太急，没来得及测试和验证，也是自己没有想清楚这个问题，然后验证下来，思路是错的 重新分析清楚思路，然后小量数据验证测试，最后将数据提取出来 总结： 1. 做事情之前一 阅读全文
posted @ 2020-08-26 10:26 Paualf 阅读(110) 评论(0) 推荐(0) 编辑
使用hive数据查询小结
摘要：业务背景： 公司大数据查询需要通过hive查询和分析一些数据 产品提出业务分析需求： 我的处理方式： 接到需求就想怎么写SQL语句，然后不断调整SQL语句进行验证，最后这个需求写了170行的SQL语句，而且经常报错，最后花了大半天时间才将数据计算出来。 资深大数据开发工程师的处理方式： 根据业务进行 阅读全文
posted @ 2020-06-04 18:15 Paualf 阅读(1578) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示