摘要: Python and HDF5 ,Andrew Collette HDF5,the most recent version of the “Hierarchical Data Format” originally developed at the National Center for Superc 阅读全文
posted @ 2023-04-11 09:36 LgRun 阅读(1087) 评论(0) 推荐(0) 编辑
摘要: 内存映射模块 了解计算机内存 内存映射是一种使用较低级别的操作系统API将文件直接加载到计算机内存中的技术。 它可以显著提高程序中的文件I/O性能。 术语内存是指随机存取内存或RAM. 计算机内存类型: 物理的 虚拟的 共享的 使用内存映射时每种类型的内存都会发挥作用,因此让我们从高层次回顾每种内存 阅读全文
posted @ 2023-04-11 09:35 LgRun 阅读(83) 评论(0) 推荐(0) 编辑
摘要: Python 有几个内置的模块和函数来处理文件。这些功能分布在几个模块上,例如os,os``os.path,shutil和pathlib,仅举几例。本文在一个地方收集了许多您需要了解的函数,以便对 Python 中的文件执行最常见的操作。 open 使用Python读取和写入数据非常简单。为此,必须 阅读全文
posted @ 2023-04-11 09:34 LgRun 阅读(38) 评论(0) 推荐(0) 编辑
摘要: 背景 以前读取mat文件时,常用的方法是使用scipy.io.loadmat(path)函数。然而近期在读取mat文件中出现了NotImplementError的问题(具体报错信息如下)。这是什么问题呢? ile D:\software\Anaconda3\envs\py38\lib\site-pa 阅读全文
posted @ 2023-04-11 09:32 LgRun 阅读(102) 评论(0) 推荐(0) 编辑
摘要: 基于selenium模拟谷歌浏览器登录时,依赖chromedriver.exe版本信息。但谷歌浏览器升级后,之前创建的脚本可能会出现因驱动版本过低,使得之前创建的脚本运行失败的问题。 下面针对该问题进行探索和解决。 selenium版本 import selenium selenium.__vers 阅读全文
posted @ 2023-04-11 09:06 LgRun 阅读(326) 评论(0) 推荐(0) 编辑
摘要: Table of Contents 1 基于pandas的时间差计算2 基于差值的时间差计算方法3 全部转换成秒进行计算 title:计算时间差 基于pandas的时间差计算 基于pandas的时间差计算。以小时为例:如a='2020-10-10 12:12:12',b='2020-12-12 12 阅读全文
posted @ 2020-10-13 16:23 LgRun 阅读(726) 评论(0) 推荐(0) 编辑
摘要: Table of Contents 1 问题背景2 应用场景 问题背景 将一个$mn$的数组(矩阵)转换成一维向量时,数组$(i,j)$和向量($ind$)中元素下标的对应关系:$ind=jn+j$。 import numpy as np #先创建一个矩阵 M=np.random.random((5 阅读全文
posted @ 2020-09-11 17:41 LgRun 阅读(612) 评论(0) 推荐(0) 编辑
摘要: Table of Contents 1 问题背景2 数据的保存与读入2.1 to_csv保存2.2 to_excel保存2.3 josn2.4 pickle" data-toc-modified-id="文件储存大小对比-3">3 文件储存大小对比<后补> 问题背景 当数据框中的元素存在列表是,使用 阅读全文
posted @ 2020-08-31 10:39 LgRun 阅读(438) 评论(0) 推荐(0) 编辑
摘要: Table of Contents 1 时间(戳)的格式化2 提取时间特征:年、月、日、季度等3 判断开始、结束4 判断是否是一天的高峰时段5 构造时间特征6 时间差及其转换7 时间的前进与后退7.1 pd.Timedelta7.2 pd.DateOffset import pandas as pd 阅读全文
posted @ 2020-08-30 13:02 LgRun 阅读(318) 评论(0) 推荐(0) 编辑
摘要: np.argsort语法 argsort(a, axis=-1, kind=None, order=None) Returns the indices that would sort an array. Perform an indirect sort along the given axis us 阅读全文
posted @ 2020-08-30 11:55 LgRun 阅读(2408) 评论(0) 推荐(1) 编辑