实时排行榜的后台数据功能实现
功能概要:数据定时更新,可查询历史数据。
详细说明:1、现在有个排行榜需要几分钟更新一次,所以我使用了windows服务定时运行;一次的数据量在30万左右,这样可能到下次更新时本次的任务没有运行完成,所以遇到这种情况就等待下次任务触发时再运行更新。
2、当运行更新时,不断有数据插入到榜单表,为了不影响当前显示的榜单数据,于是在榜单表加个状态status(0/更新中,1/显示中)。
3、当更新运行完成时,更新 status=status+1,这样更新中的数据变为显示中,显示中数据变为历史(历史一会会讲到)。
这个排行榜可以按日期查询,就是可以选择查看昨天,前天等等。这样就必须每天保存榜单数据,而每天会产生很多份榜单数据,我想到取当天最后一次的数据,但怎么确定最后一次的数据又是个问题,因为最后一份数据可能跨日期,那就取最后一份的上一份?也不行,一份数据是几十万,去按日期查询肯定是相当慢;是不是可以每份数据存个版本号?这又要想办法实现版本号的递增,跨日期清零问题等等。再想想其实一天内我只需要一份完整的数据,每次更新后我可以把上份删掉了,然后在每天另存一份即可。有了这个思路,我在榜单表中的status字段再加个状态(2/历史)。
现在,当更新运行完成时,更新 status=status+1,status会出现2个值(1/显示中,2/历史),那如果再运行更新呢,会出现第3个值 3(这个值看起来可以做版本号了,呵呵,因为是递增的)。但是status=3这个数据是我们不需要的,那每次更新完干脆删除status=3的数据好了。
现在我创建一个榜单历史表,结构与榜单表一样,但没有状态status字段,这个表的数据如何更新呢?因为榜单是按日查询的,所以就每天插入一份即可,与其在服务中加逻辑,不如直接在数据库中写个job,定在每天23:59执行,取状态status=2的数据即可了。