scrapy post发送json数据

转载

scrapy Post 发送数据是我们通常会用

yield scrapy.FormRequest(
url = url,
formdata = {"email" : "xxx", "password" : "xxxxx"},
callback = self.parse_page
)
来发送请求,但这是发送header为

'Content-Type', 'application/x-www-form-urlencoded
的数据,有时候我们做一些爬虫,会post发送json数据,否则不能返回正确的结果,如果直接用request很方便,但在scrapy里就需要这样用

yield Request(url, method="POST", body=json.dumps(data), headers={'Content-Type': 'application/json'},callback=self.parse_json)
这样就可以发送json 数据了

原文链接:https://blog.csdn.net/csdn_am/java/article/details/79729490

posted @ 2020-04-10 09:59  sunshine_5  阅读(523)  评论(0编辑  收藏  举报