从mysql读取大量数据时的实践

摘要： 背景程序启动时，从mysql读取所有的数据，在内存中建立数据结构。mysql表中至少有100w条记录。以后根据时间定期从mysql增量读取数据，刷新内存结构。表结构为{uid, product, state, modify_time，primary key(uid, product)， key(mo... 阅读全文
posted @ 2015-10-26 15:03 amither 阅读(1311) 评论(0) 推荐(0) 编辑

一点小波折

摘要： 在修改公共库的过程中，有一个函数少了个步骤，同事用的时候发现有些问题。下午开例会的时候被组长批评了。以后一定要经过严格的自测才行，要测试驱动开发。首先得熟悉gtest框架。第二，要熟悉脚本工具的使用，写测试用例比较好写。 阅读全文
posted @ 2014-11-18 21:34 amither 阅读(154) 评论(0) 推荐(0) 编辑

xx通CGI流量控制

摘要： 流量控制共分2步，首先在CGI框架对用户的ip作限制，第二限制每个CGI的流量。一、基于IP的流量控制用共享内存（shm）的方式保存基于ip的访问信息。配置文件中 shm_key是共享内存的id，limit_int是用户超过限制后的冷冻时间，recal_int是统计时间，max_count是统计时间... 阅读全文
posted @ 2014-11-18 09:09 amither 阅读(266) 评论(0) 推荐(0) 编辑

处女博

摘要： 大概是在06年第一次见到博客，时隔8年我终于开通了自己的博客（此处应有掌声），谨以此博记录我的挖矿历程。每天一篇，能做到吗？ 阅读全文
posted @ 2014-11-16 09:42 amither 阅读(109) 评论(1) 推荐(0) 编辑