2019年1月4日
用户代理列表--爬虫伪装浏览器访问用
摘要： 整理了一批UserAgent 代码如下： 阅读全文
posted @ 2019-01-04 15:37 Wualin 阅读(515) 评论(0) 推荐(0) 编辑
python爬虫解析页面数据的三种方式
摘要： re模块 re.S表示匹配单行 re.M表示匹配多行 使用re模块提取图片url，下载所有糗事百科中的图片 普通版 使用多线程下载 xpath xpath在爬虫中的使用流程 下载 导包 创建etree对象进行指定数据的解析 本地：tree = etree.parse('本地文件路径') etree. 阅读全文
posted @ 2019-01-04 15:28 Wualin 阅读(2641) 评论(0) 推荐(0) 编辑