摘要: 此篇博客为本人对小甲鱼的课程的总结。 关于Scrapy的安装网上都有方法,这里便不再叙述。 使用Scrapy抓取一个网站一共需要四个步骤: 0、创建一个Scrapy项目; 1、定义Item容器; 2、编写爬虫; 3、存储内容。 本次爬取的目标是全球最大的目录网站http://www.dmoztool 阅读全文
posted @ 2018-07-22 18:09 我星伤悲 阅读(378) 评论(0) 推荐(0) 编辑