2019年6月17日

摘要: post请求登陆github'''import requestsimport re# 一 访问login页获取token信息'''请求url: https://github.com/login请求方式: GET响应头: Set-Cookie请求头: Cookie User-Agent'''heade 阅读全文
posted @ 2019-06-17 22:27 junrob 阅读(119) 评论(0) 推荐(0) 编辑
摘要: 昨日回顾爬虫的全过程:1发送请求(请求库)——requests模块——selenium模块2获取响应数据(服务器返回)——bs4——Xpath3解析并提取数据(解析库)4保存数据(存储库)——MongoDB1,3,4需要手动写爬取梨视频:1分析网站的视频源地址2通过requests网视频源地址今日内 阅读全文
posted @ 2019-06-17 22:20 junrob 阅读(137) 评论(0) 推荐(0) 编辑

导航