2016年2月26日
java爬虫框架webmagic
摘要： 最近需要爬去网站的一些商品,就开始在网上找方法,本来是想着用Python做的,因为以前用Python写过一个小脚本,爬取一个文献网站上的免费文献. 步骤大概是这样的:1,先获取给定URL的html文件,然后在这个文件中用正则表达式匹配出需要的URL(可能含有分页的URL),然后再获取匹配出的URL的 阅读全文
posted @ 2016-02-26 19:14 ___delete 阅读(319) 评论(0) 推荐(0) 编辑