随笔分类 - python
摘要:import requests import pandas as pd from 公用.业务.login import LogIn mytoken = LogIn().take_login() headers = { 'Content-type': 'application/json', 'Acce
阅读全文
摘要:概念介绍: 匿名函数:是指一类无需定义标识符(函数名)的函数或子程序 关键字lambda表示匿名函数,冒号前面的n表示函数参数,可以有多个参数。 匿名函数有个限制,就是只能有一个表达式,不用写return,返回值就是该表达式的结果。 用匿名函数有个好处,因为函数没有名字,不必担心函数名冲突。此外,匿
阅读全文
摘要:1.函数作用: map()函数是python的一个内置函数,它的功能是:将指定的函数,依次作用于可迭代对象的每个元素,并返回一个迭代器对象。这个迭代器可以是一个,也可以是多个 2.map() 的语法: map(function,iterable,...) 参数: function-我们指定的函数(或
阅读全文
摘要:Selenium广泛应用于自动化测试和自动化业务开发,同时在网络爬虫中也有较多的应用,使用Selenium有两个核心的问题:第一个是如何在爬虫领域不被识别出来,另一个是在自动化领域如何解决超时加载的问题。 今天来总结一下处理Selenium在自动化业务中的超时加载,让程序不在奔溃,同时能准确的获取信
阅读全文
摘要:collections是Python标准库中的一个模块,提供了许多有用的集合类型,用于扩展内置的数据类型。 以下是collections模块中一些常用的集合类型: Counter:用于计数可迭代对象中元素出现的次数,并以字典的形式返回统计结果。 defaultdict:是一个具有默认值的字典,当访问
阅读全文
摘要:import concurrent.futures # 创建一个线程池 with concurrent.futures.ThreadPoolExecutor() as executor: # 提交任务给线程池 task1 = executor.submit(func1, arg1) task2 =
阅读全文
摘要:文本: 账号|111111 密码|111111 安全令|111111 微信群|"下载保单" 下载地址|"D:\电子保单下载" 机器人|"@吃不着老鼠的猫" 日志|"D:\日志\运行日志.log" 通用账号|"32040000" 读取文本,并把数据以 {key: value} 形式返回: class
阅读全文
摘要:python数据类型分别有整数int / 浮点数float / 布尔值bool / 元组tuple / 列表list / 字典dict,其中数据类型分为两个大类,一种是可变数据类型;一种是不可变数据类型 在python编程的时候,代码中的变量实际上都是存储在计算机内存中,通过python内置函数id
阅读全文
摘要:reverse()函数,可以反正 列表的函数 用法 data = [1, 2, 3] data.reverse() print(data)输出:[3, 2, 1] 1、reverse()会修改原始副本 reverse() 设计的目的就是反转原始列表并返回None。 这样设计的好处就是,不需要创建新的
阅读全文
摘要:import calendar # 获取 2023 年 8 月份的日历 cal = calendar.monthcalendar(2023, 8) # 将日期转换为 YYYY:MM: 的形式并保存到列表中 dates = [] for week in cal: for day in week: if
阅读全文
摘要:Loguru 是一个强大而易于使用的日志记录库,logger.add() 方法用于向 Loguru logger 添加处理程序。下面是 logger.add() 方法的所有参数及其用法说明: sink:指定日志消息的目标输出位置。可以是文件名字符串或一个可调用对象。例如: 'my.log':将日志写
阅读全文
摘要:map()是Python内置的函数之一,用于将一个函数应用于一个或多个可迭代对象中的每个元素,并返回一个包含结果的新的map对象。根据引用,map()函数接受两个参数,第一个参数是一个函数名,第二个参数是一个或多个可迭代的序列(如列表、元组、集合)。map()函数将函数应用于可迭代对象中的每个元素,
阅读全文
摘要:python3多线程有threading,很好的支持了多线程,那么问题来了,为什么还需要线程池呢,其实很好回答,如果你要爬取网站有八百页,每页设置一个线程,难道能开启八百个么,光切换的时间也很高了吧。这时候就需要用到线程池,可以设置一个20的线程池,同时只有20个线程在运行,剩下的排队。 线程池模块
阅读全文
摘要:import os import sys from openpyxl import load_workbook class Excel: # 读取数据 def __init__(self, excel_path, sheet_name): """ :param excel_path: excel文件
阅读全文
摘要:import pandas as pd # 读取第一个Excel文件 df1 = pd.read_excel('excel_file1.xlsx') # 读取第二个Excel文件 df2 = pd.read_excel('excel_file2.xlsx') # 找出在df1中存在但不在df2中的行
阅读全文
摘要:import pandas as pd import os # 创建一个空的数据框列表 data_frames = [] # 获取当前脚本的目录路径 current_directory = os.getcwd() folder_path = os.path.join(current_director
阅读全文
摘要:高德开发者文档 :https://lbs.amap.com/api/webservice/guide/api/direction#driving 第一步:首先要申请自己的:key 第二步:根据自己的需求,从开发者文档。找到自己需要的API 第三步:发送请求,解析数据 获取两个坐标之间最优的路线距离
阅读全文
摘要:def login(extension_path,tmp_path): chrome_options = webdriver.ChromeOptions() # 设置好应用扩展 chrome_options.add_extension(extension_path) #添加下载路径 prefs =
阅读全文