2016年3月27日

MinerUtil.java 爬虫工具类

摘要： MinerUtil.java 爬虫工具类package com.iteye.injavawetrust.miner;import java.io.File;import java.io.FileNotFoundException;import java.io.FileOutputStream... 阅读全文

posted @ 2016-03-27 09:45 木鱼哥 阅读(298) 评论(0) 推荐(0) 编辑

MinerUrl.java 解析页面后存储URL类

摘要： MinerUrl.java 解析页面后存储URL类package com.iteye.injavawetrust.miner;/** * 解析页面后存储URL类 * @author InJavaWeTrust * */public class MinerUrl { /** * 当前爬取UR... 阅读全文

posted @ 2016-03-27 09:42 木鱼哥 阅读(180) 评论(0) 推荐(0) 编辑

MinerThreadPool.java 线程池

摘要： MinerThreadPool.java 线程池package com.iteye.injavawetrust.miner;import java.util.concurrent.BlockingQueue;import java.util.concurrent.LinkedBlocking... 阅读全文

posted @ 2016-03-27 09:37 木鱼哥 阅读(157) 评论(0) 推荐(0) 编辑

MinerStoreThread.java 存储线程

摘要： MinerStoreThread.java 存储线程package com.iteye.injavawetrust.miner;import java.util.HashMap;import java.util.Map;import org.apache.commons.logging.Lo... 阅读全文

posted @ 2016-03-27 09:35 木鱼哥 阅读(204) 评论(1) 推荐(0) 编辑

MinerQueue.java 访问队列

摘要： MinerQueue.java 访问队列package com.iteye.injavawetrust.miner;import java.util.HashSet;import java.util.LinkedList;import java.util.Queue;import java.... 阅读全文

posted @ 2016-03-27 09:32 木鱼哥 阅读(216) 评论(0) 推荐(0) 编辑

导航