Strava
给自己一些目标,不论大小,恒~aw|

cheflone

园龄:5年2个月粉丝:24关注:14

scrapy.Request 和response

1.request

Request是一个类

get请求

1          scrapy.Request(url=url,callback=self.parse_item,meta={'item':item},headers=header,dont_filter=True)

url:要求的u地址

callback:响应成功后的回掉函数

meta:参数传递 接收语法: data = mate['item']

headers:user_agent,定制头信息,一般不用

 

 

2.response

 

是一个对象 函数的第二个参数

response.text #字符串格式的文本内容

response.body #二进制格式的文本

response.url # 当前相应的url

response.status # 状态码

response.xpath() # 使用xpth规则来筛选类容

response.css() # 使用css规则来筛选类容

posted @   cheflone  阅读(209)  评论(0编辑  收藏  举报
编辑推荐:
· SQL Server 内存占用高分析
· .NET Core GC计划阶段(plan_phase)底层原理浅谈
· .NET开发智能桌面机器人:用.NET IoT库编写驱动控制两个屏幕
· 用纯.NET开发并制作一个智能桌面机器人:从.NET IoT入门开始
· 一个超经典 WinForm,WPF 卡死问题的终极反思
阅读排行:
· 支付宝事故这事儿,凭什么又是程序员背锅?有没有可能是这样的...
· 在线客服系统 QPS 突破 240/秒,连接数突破 4000,日请求数接近1000万次,.NET 多
· C# 开发工具Visual Studio 介绍
· 在 Windows 10 上实现免密码 SSH 登录
· C#中如何使用异步编程
点击右上角即可分享
微信分享提示
评论
收藏
关注
推荐
深色
回顶
收起