摘要:
演示代码: responce = requests.get(url = url_web,headers=head) url_obj = re.compile(r'<a class="media-content" target="_blank" href="(?P<url>.*?)" title=". 阅读全文
摘要:
小程序调试工具加载完小程序后,左上角菜单依次选择“工具-自动化测试” 打开自动化测试工具页面后等待程序加载完,点击“开始录制” 点击左侧小程序预览窗口,用例详情内生成执行步骤(用例步骤),完成后点击停止录制 回到小程序调试工具,点击右上角“云测” 打开云测管理平台,在测试用例管理-录制回放用例,点开 阅读全文
摘要:
猫眼有一个电影榜单top100,我们将他的榜单电影数据(电影名、主演、上映时间、豆瓣评分)抓下来保存到本地的excle中 本案例使用css方式提取页面数据,所以会用到以下库 import time import requests import parsel #解析库,解析css import csv 阅读全文
摘要:
一、xpath:下图中,页面内容存储在页面元素中,可以使用xpath方法进行数据提取,具体事例参考下面几个链接的文字 1、https://www.cnblogs.com/becks/p/11335493.html 2、https://www.cnblogs.com/becks/p/11440333. 阅读全文
摘要:
比如,下面网页里大学排行的数据 分析这个页面,表格内的数据是包裹在tables里的 这样就可以使用pandas对数据进行提取并且导出成csv文件,具体代码很简单 import pandas as pd html='http://www.jdxzz.com/paiming/2022/0906/9664 阅读全文
摘要:
简单查询: 1、SELECT * FROM 表名称 WHERE 字段名 LIKE '查询内容' 1)、 SELECT * FROM member WHERE NickName LIKE '贝克汉姆':查询member表NickName字段值为'贝克汉姆'数据 2)、 SELECT * FROM me 阅读全文
摘要:
我们在对多个链接进行处理的时候,往往是先请求一个链接获得数据后,再请求第二个。 中间在等待返回数据时候,存在一个空闲时间,脚本啥都没干。 用aiohttp异步协程的方法,创建多条任务发送请求(理论上不是多任务,可以理解为前一个请求发送后不等待结果就发送第二条请求) 这里引用的是别人的案例,对异步协程 阅读全文
摘要:
本案关键内容点:json数据反序列化、提取数据、写入CSV 创建csv,写入表头数据,脚本同目录下会创建名称为book的csv文件,且第一行插入表头内容 import csv f = open('book.csv',mode='a',encoding='utf-8',newline='') #表头 阅读全文
摘要:
阅读全文
摘要:
阅读全文