07 2018 档案

摘要:# -*- coding: utf-8 -*- import scrapy from scrapy.http import Request # 我们如果要模拟登陆,就必须要拿到cookie # response里面有url,text等等,但遗憾的是不想requests,可以直接拿到cookie # 阅读全文
posted @ 2018-07-11 14:34 爬上墙头 阅读(265) 评论(0) 推荐(0) 编辑
摘要:通过架设flask或django web服务器,同时后台采用requests和bs4模块来爬取web微信程序相关信息。 在代码过程中遇到一些问题,1、需要认真分析网络请求包。 2、cookies 在获取收发信息时需要携带 3、SyncKey等相关信息在checklogin时就已经返回了,一定要仔细分 阅读全文
posted @ 2018-07-09 09:15 爬上墙头 阅读(218) 评论(0) 推荐(0) 编辑
摘要:学习笔记: 通过本章的学习,学习到了requests和BeautifulSoup模块的安装及使用方法。以及爬取给类网站的方法和知识点。 1、requests和BeautifulSoup 安装 pip install requests...... 2、使用 import requestsfrom bs 阅读全文
posted @ 2018-07-04 14:13 爬上墙头 阅读(621) 评论(0) 推荐(0) 编辑