摘要: bloom-filter 算法场景:我说的大数据量处理是指同时需要对数据进行检索查询,同时有高并发的增删改操作; 记得以前在XX做电力时,几百万条数据,那时一个检索查询可以让你等你分钟; 现在我是想探讨下对大数据量的处理,那时我就在想例如腾讯,盛大,动辄数以亿计的帐号,怎么能这么快呢, 于是找到了互联网现在对数据处理的发展: 对于大数据量处理,如果是互联网处理的话,一般分为下面阶段: 第一阶段,所有数据都装入一个数据库,当数据量大了肯定就会出现问题,就像刚刚说的查询,于是想办法 第二阶段,那时肯定想做缓存机制,确实可以如加上缓存Memcached,但缓存也是治标不治本,数据量太大了也是不行于是 阅读全文
posted @ 2012-02-25 16:57 何锦彬 阅读(23674) 评论(19) 推荐(9) 编辑