Python selenium —— 父子、兄弟、相邻节点定位方式详解
摘要：今天跟大家分享下selenium中根据父子、兄弟、相邻节点定位的方法，很多人在实际应用中会遇到想定位的节点无法直接定位，需要通过附近节点来相对定位的问题，但从父节点定位子节点容易，从子节点定位父节点、定位一个节点的哥哥节点就一筹莫展了，别急，且看博主一步步讲解。 1. 由父节点定位子节点最简单的肯定
阅读全文
posted @ 2019-01-21 23:28
随笔分类 - Python
Python 是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。
Python爬虫入门教程石家庄链家租房数据抓取
摘要：1. 写在前面 这篇博客爬取了链家网的租房信息，爬取到的数据在后面的博客中可以作为一些数据分析的素材。我们需要爬取的网址为：https://sjz.lianjia.com/zufang/ 2. 分析网址 首先确定一下，哪些数据是我们需要的 可以看到，黄色框就是我们需要的数据。 接下来，确定一下翻页规
阅读全文
posted @ 2019-01-17 04:44
自动化测试 selenium 环境搭建
摘要：做 web 项目，测试是无法避免的。对于某些特定功能，采用单元测试就行。但如果想对网站进行整体测试，人工点击测试可行但有点累，如果能借助自动化测试工具就更好了。selenium 就是一款能满足这样要求的测试工具，selenium 是一款用于 web 应用程序测试的工具。测试是直接运行在浏览器中，就像
阅读全文
posted @ 2019-01-17 04:19
python3爬虫（find_all用法等）
摘要：#read1.html文件 # The Dormouse's story # # The Dormouse's story # # Once upon a time there were three little sisters; and their names were # Elsie, # Lacie and # Tillie; # and they lived at the bottom...
阅读全文
posted @ 2019-01-16 01:01
python网络爬虫抓取动态网页并将数据存入数据库MySQL
摘要：简述以下的代码是使用python实现的网络爬虫，抓取动态网页 http://hb.qq.com/baoliao/ 。此网页中的最新、精华下面的内容是由JavaScript动态生成的。审查网页元素与网页源码是不同。 以下是网页源码 以上是审查网页元素 所以此处不能简单的使用正则表达式来获取内容。 以下
阅读全文
posted @ 2019-01-15 00:00
python正则表达式贪婪与非贪婪模式
摘要：之前做程序的时候看到过正则表达式的贪婪与非贪婪模式，今天用的时候就想不起来了，现在这里总结一下，以备自己以后用到注意。 1.什么是正则表达式的贪婪与非贪婪匹配 如：String str="abcaxc"; Patter p="ab.*c"; 贪婪匹配:正则表达式一般趋向于最大长度匹配，也就是所谓的贪
阅读全文
posted @ 2019-01-06 01:44
python3获取一个网页特定内容
摘要：我们今天要爬取的网址为：https://www.zhiliti.com.cn/html/luoji/list7_1.html 一、目标：获取下图红色部分内容 即获取所有的题目以及答案。 二、实现步骤。 分析：1，首先查看该网站的结构。 分析网页后可以得到： 我们需要的内容是在该网页<li>标签下，详
阅读全文
posted @ 2019-01-06 00:05
