会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
吴增丁
博客园
首页
新随笔
联系
订阅
管理
2017年11月13日
python处理大文件——文件流处理
摘要: 最近处理一份1000G+的大文件,直接loading进内存不可能,只能分片读取。文件介绍如下: 该文件是一份压缩的比对后文件(sam文件),该文件由很多细小的结构单元组成,一个结构如下: 两种方法: 1、用open([buffer])的方法; 2、根据文件内容的结构快读取; 由于该文件有自己的结构,
阅读全文
posted @ 2017-11-13 18:02 吴增丁
阅读(4797)
评论(0)
推荐(0)
编辑
公告