数据测试流程经过
需求:对于一张新表,按照日期每天进行分区,通过sql语句进行两张源表的关联获得数据后分别插入新表的2018年到2019年的每天分区后,数据核对不上如何测试?
分析:数据核对不上,肯定是某年某月某日的数据插入错误或者原本有数据,现在需要找出来。
1:分别对18年和19年总的数据进行统计,发现18、19年的数据和原表关联查出来的数据均对不上,说明18、19年均有问题。
2:分别对18年和19年各月的数据进行统计并按照月份排序,然后和原表关联的数据进行比较:发现18年6月和19年5月的数据有错。
3:分别对18年6月每天和19年5月每天的数据进行统计排序然后与原表关联处理的数据进行对比发现:20180626和20190520的数据错误;20180626的数据重复插入,20190520数据未插入。
4:分别对这两天分区中的数据进行重新插入,插入前线删除原数据:ALTER TABLE dmx_dm.dmx_dm_mds_crowd_tailing truncate PARTITION P201xxxxx
5:插入后验证这两天的数据是否正确;验证全部数据是否核对准确。
6:核对准确,问题处理完毕,进行总结以及后续处理。