05 2022 档案
摘要:一、POST请求数据流程 以百度翻译网页进行分析。使用场景为:用户填入信息,页面对其进行翻译。 按 F12 打开控制台,依次点击 Network > XHR(此为异步加载的网络数据包),再点击左侧 URL 链接,在右侧的 payload和Preview 栏能够看到对响应内容的预览信息,其中包含用户输
阅读全文
摘要:一、说明 sar(System ActivityReporter系统活动情况报告)是分析系统性能的重要工具之一。通过该命令可以全面地获取系统的 CPU、运行队列、磁盘读写(I/O)、分区(交换区)、内存、CPU 中断和网络等性能数据。,可以从多方面对系统的活动进行报告,包括:文件的读写情况、系统调用
阅读全文
摘要:1、get请求的quote方法 : 将str数据转换为对应编码 urllib.parse.quote 将str数据转换为对应编码 urllib.parse.unquote 将编码后的数据转换为编码前的数据 #https://www.baidu.com/s?wd=%E5%91%A8%E6%9D%B0%
阅读全文
摘要:1. urllib下载资源 可以将爬取到的数据下载到本地,例如视频、音频、图片等 下载的方法是urllib.request.urlretrieve(url,fileName),retrieve是取回的意思 参数url表示的是数据的url地址 参数fileName表示的是保存到本地的文件名称 ①、爬取
阅读全文
摘要:urllib的详解使用 Urllib 库是 Python 内置的 HTTP 请求库,urllib 模块提供的上层接口,使访问 www 和 ftp 上的数据就像访问本地文件一样,并且它也是requests的底层库。它包含四个模块: urllib.request:请求模块。 urllib.error:异
阅读全文
摘要:爬虫的基本原理 爬虫概述 简单来说,爬虫就是获取网页并提取和保存信息的自动化程序。 可以将爬虫总结为4个步骤: 1.获取网页 爬虫首先要做的工作就是获取网页,也就是获取网页的源代码,源代码包含了网页的部分有用信息,所以只要把源代码获取下来,就可以从中提取想要的信息。 根据请求和响应的概念,向网站的服
阅读全文
摘要:什么是异常? 异常即是一个事件,该事件会在程序执行过程中发生,影响了程序的正常执行。 一般情况下,在Python无法正常处理程序时就会发生一个异常。 异常是Python对象,表示一个错误。 当Python脚本发生异常时我们需要捕获处理它,否则程序会终止执行。 异常的格式 捕捉异常可以使用try/ex
阅读全文
摘要:一、文件的打开与关闭 打开文件/创建文件 使用open函数可以打开一个已经存在的文件,或者创建一个新文件 open(文件类路径,访问模式) 示例: f = open('test.txt','w') 说明: 文件路径 绝对路径:指的是绝对位置,完整地描述了目标的所在地,所有目录层级关系是一目了然的。
阅读全文
摘要:一、定义函数 很多重复的业务逻辑 重复出现的时候 我们可以使用函数 定义函数的格式如下: def 函数名(): 代码 二、调用函数 定义了函数之后,就相当于有了一个具有某些功能的代码,想要让这些代码能够执行,需要调用它 使用 函数名() 调用 # 定义函数 def Siri(): print('hi
阅读全文
摘要:一、字符串的常见操作包括: len 获取字符串的长度 find 查找指定内容在字符串中是否存在,如果存在就返回该内容在字符串中第一次出现的开始位置索引值,不存在则返回-1 startswith,endswith 判断字符串是不是以xxx开头,结尾 count 计算出现次数 replace 替换字符串
阅读全文
摘要:一、if判断语句 if语句是用来进行判断的,其使用格式如下: if 要判断的条件: 条件成立时要做的事 Demo age = input('输入年龄:') #input返回的是字符串类型 if int(age) > 18: #这里对age做强制类型转换 字符串和整数int不可比较 print('你成
阅读全文
摘要:1、数据类型 Number 数值 int 整型 #整数 float 浮点数 #小数 布尔类型 True False string 字符串 #使用单引号或者双引号 list 列表 list = ['张三','李四'] #用 [ ] 方括号 tuple 元组 tuple = (1,2,3,4) #用 (
阅读全文
摘要:国内互联网常用的pypi安装源URL 清华大学:https: //pypi.tuna.tsinghua.edu.cn/simple/ 中国科技大学: https://pypi.mirrors.ustc.edu.cn/simple/ 腾讯:http: //mirrors.cloud.tencent.c
阅读全文