会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
cs_1993
博客园
::
首页
::
新随笔
::
联系
::
订阅
::
管理
公告
2019年8月16日
Scrapy框架高级操作
摘要: 一 爬取多URL 实现同一个网址的多个url爬取 二 发起post请求 # 将百度翻译中指定词条对应的翻译结果进行获取 三 实现对cookie的操作 四 代理操作 下载中间件的作用: 拦截请求,可以将请求的ip进行更换 流程: (1)下载中间件类的自制定 # 自定义一个下载中间件的类, 在类中事先p
阅读全文
posted @ 2019-08-16 10:54 cs_1993
阅读(318)
评论(0)
推荐(0)
编辑