会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
神神气气
博客园
首页
新随笔
联系
订阅
管理
2019年3月4日
scrapy提交关键字请求
摘要: 提交查询关键字的请求 这里重写父类的start_requests方法
阅读全文
posted @ 2019-03-04 19:56 神神气气
阅读(365)
评论(0)
推荐(0)
编辑
关于scrapy里的中间件和请求传参
摘要: 一、中间件 scrapy中间件事介于下载器和scrapy引擎之间,主要是接收和发送响应和请求 下面是关于中间件的方法的介绍 1 class MiddleproDownloaderMiddleware(object): 2 user_agent_list = [ 3 "Mozilla/5.0 (Win
阅读全文
posted @ 2019-03-04 19:42 神神气气
阅读(911)
评论(0)
推荐(0)
编辑
公告