摘要: 一、爬虫基本步骤 指定URL信息 发起请求 获取响应数据 对响应数据进行数据解析 持久化存储 二、数据解析 1. 正则表达式 (1) 基本语法 (2) 相关案例 2. Beautifulsoup (1) 环境安装 (2) 基础使用 3. xpath (1) 选取节点 | 表达式 | 描述 | | | 阅读全文
posted @ 2019-04-29 20:27 qi.hu 阅读(830) 评论(0) 推荐(0) 编辑
摘要: 1. 安装 2. 使用 (1) GET | 属性 | 说明 | | | | | response.text | 获取响应文本 | | response.content | 获取网页上的二进制图片、视频 | | response.encoding | 获取网页编码 | | response.encod 阅读全文
posted @ 2019-04-29 19:40 qi.hu 阅读(169) 评论(0) 推荐(0) 编辑