摘要: 超级鹰(更简单的操作验证) 1.12306自动登录 # Author: studybrother sun from selenium import webdriver import time from selenium.webdriver import ActionChains from PIL i 阅读全文
posted @ 2019-05-30 23:31 studybrother 阅读(741) 评论(0) 推荐(0) 编辑
摘要: 1.selenium是什么? http://blog.csdn.net/huilan_same/article/details/51896672 http://blog.csdn.net/huilan_same/article/details/51896672 (1)演示程序 前戏:加载驱动程序(下 阅读全文
posted @ 2019-05-30 22:12 studybrother 阅读(377) 评论(0) 推荐(0) 编辑
摘要: 1.测试学习 (2)单线程: 测试结果:需要6秒多 (2)开启线程池:测试结果是2秒多 测试结果: (3)在程序中是否可以一味的使用多线程,多进程? 推荐:单线程+异步协程(效率最高,用的人不是很多,大量爬取数据是会用到的) 下面了解一下 协程(go和python独有的概念),,协程不会占用很高的内 阅读全文
posted @ 2019-05-30 18:09 studybrother 阅读(528) 评论(0) 推荐(0) 编辑
摘要: 1.美团抓取回顾id是处理的核心问题!!! 2.回顾重点内容 (1)模拟登陆: --有时我们需要爬取基于当前用户的用户信息(需要登录后才可查看) --实现流程: --借助于珠宝工具,抓取点击登录按钮发起的post请求(url,参数(动态参数)) --携带cookie对其他子页面进行请求发送 注意:c 阅读全文
posted @ 2019-05-30 17:50 studybrother 阅读(152) 评论(0) 推荐(0) 编辑