python 读取大文本文件并存入numpy时过于费时的问题及猜测
摘要:
因需要读取大文本文件(约有1,300,000行,40兆),并简单处理存入numpy数组中,运行过程中发现随读取数据的增加,耗费时间显著增加,稍作修改后运行速度显著提升,不解,记之,希望大家帮忙解惑。 初步猜测(未验证):在原始代码中对numpy数组进行了vstack,而这个过程可能对已有数组进行了类 阅读全文
posted @ 2021-06-01 22:50 他的博客 阅读(310) 评论(0) 推荐(0) 编辑