会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
xieyan0811
博客园
首页
新随笔
联系
管理
订阅
2017年12月20日
Python海量数据处理之_单机优化
摘要: 1. 说明 数据处理时,可能会遇到数千万以及上亿条数据的情况。一次处理所有数据,会遇到内存不够,计算时间太长等问题。一般的解法是:先拆分,再处理,最后将处理的结果合并(当然数据少的时候不需要这么麻烦)。本文将介绍在单机上,只使用Python如何处理大量...
阅读全文
posted @ 2017-12-20 17:22 xieyan0811
阅读(50)
评论(0)
推荐(0)
编辑
公告