摘要: scrapy选择器的用法 //selector可以加可以不加 response.selector.xpath("//title/text()").extract_first() response.selector.css("title::text").extract_first() response.xpath("//title/text()").extract_first() re... 阅读全文
posted @ 2019-03-08 16:09 水墨黑 阅读(217) 评论(0) 推荐(0) 编辑
摘要: 1.mysql数据库 2.mongoDB数据库 3.redis数据库 1.创建项目 scrapy startproject myproject cd myproject 2.创建爬虫 scrapy genspider myspider www.baidu.com scrapy genspider -t crawl myspider www.baidu.com----创建有rules... 阅读全文
posted @ 2019-03-08 15:00 水墨黑 阅读(712) 评论(0) 推荐(0) 编辑