2012年12月14日

java 添加properties文件读写

摘要: import java.io.InputStream;import java.util.Properties;/** * @author guoxiang * */public class Config { private static Config instance = null; private Properties properties = null; private Config() { init(); } public static Config getInstance() { if (... 阅读全文

posted @ 2012-12-14 15:48 雨渐渐 阅读(609) 评论(0) 推荐(0) 编辑

网络爬虫速成指南 (四) URL判重

摘要: 如果采集量比较小:布隆过滤器详解原理如果采集量比较大:redis:主要是把URL转为md5,作为key来进行判重关于布隆过滤器器的参数说明,简单点说:private static BloomFilter bloomFilter = new BloomFilter(2X, X);这样用就可以了附:布隆... 阅读全文

posted @ 2012-12-14 15:39 雨渐渐 阅读(1004) 评论(0) 推荐(0) 编辑

导航