摘要: 18.1 Scrapy Shell Scrapy 终端是一个交互终端,我们可以在未启动 spider 的情况下尝试及调试代码,也可以用来测试 XPath 或 CSS 表达式,查看他们的工作方式,方便我们爬取的网页中提取的数据。 18.2.1 启动Scrapy Shell 进入项目的根目录,执行下列命 阅读全文
posted @ 2018-08-29 10:11 听海8 阅读(363) 评论(0) 推荐(0) 编辑
摘要: 18.1 IPython IPython 是 python 的一个第三方库,在新建 Scrapy 爬虫项目和运行 Scrapy 爬虫,都会用到 Scrapy 终端,如果安装了 IPython ,Scrapy 终端将使用 IPython (替代标准Python 终端)。 IPython 终端与其他相比 阅读全文
posted @ 2018-08-29 10:06 听海8 阅读(389) 评论(0) 推荐(0) 编辑
摘要: 26.1 XPath helper 26.1.1 XPath helper 插件概述 xPath helper 是一款 Chrome 浏览器的开发者插件,安装了 xPath helper 后就能轻松获取 HTML元素的 xPath,程序员就再也不需要通过搜索 html 源代码,定位一些 id 去找到 阅读全文
posted @ 2018-08-29 10:02 听海8 阅读(1370) 评论(0) 推荐(0) 编辑
摘要: python3 接口测试数据驱动之操作mysql数据库 阅读全文
posted @ 2018-08-11 12:00 听海8 阅读(2213) 评论(0) 推荐(0) 编辑
摘要: python3 接口测试数据驱动之操作 excel 文件 阅读全文
posted @ 2018-08-11 11:46 听海8 阅读(2516) 评论(0) 推荐(0) 编辑
摘要: 1.1 接口测试项目搭建 1.1.1 教育局招生管理系统部署 教育局招生管理系统是基于java+mysql,下面介绍它的部署过程。 1.从我的网盘下载部署文件。 2.安装jdk以及配置环境变量。 点击文件进行安装。 下一步下一步直接安装。 本人的安装路径是C:\Program Files\Java\ 阅读全文
posted @ 2018-07-01 16:51 听海8 阅读(56791) 评论(38) 推荐(7) 编辑
摘要: 验证码自动识别 在很多WEB网站登录的时候,都需要输入验证码,Python提供了一些库(例如常用的OCR库)来识别和使用在线图片中的文字。 将图像翻译成文字一般被称为光学文字识别(Optical Character Recognition, OCR)。可以实现OCR的底层库并不多,目前很多库都是使用 阅读全文
posted @ 2018-06-24 10:10 听海8 阅读(1385) 评论(0) 推荐(0) 编辑
摘要: 1.1 JSON介绍 json简单说就是javascript中的对象和数组,所以这两种结构就是对象和数组两种结构,通过这两种结构可以表示各种复杂的结构。 1. 对象:对象在js中表示为{ }括起来的内容,数据结构为 { key:value, key:value, ... }的键值对的结构,在面向对象 阅读全文
posted @ 2018-06-23 16:44 听海8 阅读(1483) 评论(0) 推荐(0) 编辑
摘要: request库 虽然Python的标准库中 urllib.request 模块已经包含了平常我们使用的大多数功能,但是它的 API 使用起来让人感觉不太好,而 Requests 自称 “HTTP for Humans”,说明使用更简洁方便。 Requests 唯一的一个非转基因的 Python H 阅读全文
posted @ 2018-06-23 16:37 听海8 阅读(2267) 评论(1) 推荐(1) 编辑
摘要: Cookie 是指某些网站服务器为了辨别用户身份和进行Session跟踪,而储存在用户浏览器上的文本文件,Cookie可以保持登录信息到用户下次与服务器的会话。 Cookie原理 HTTP是无状态的面向连接的协议, 为了保持连接状态, 引入了Cookie机制 Cookie是http消息头中的一种属性 阅读全文
posted @ 2018-05-17 15:55 听海8 阅读(1402) 评论(0) 推荐(0) 编辑