摘要: 我使用这个函数就是用来清洗数据,删选过滤掉DataFrame中一些行。布尔索引这里你需要知道DateFrame中布尔索引这个东西,可以用满足布尔条件的列值来过滤数据,如下>>> df=pd.DataFrame(np.random.randn(4,4),columns=... 阅读全文
posted @ 2018-05-27 21:12 不知道的痛 阅读(1766) 评论(0) 推荐(0) 编辑
摘要: 本文搜集我学习实战过程中看到的好文,和自己学习总结的一些文章,持续更新数据分析如何入门学习How do I learn data analysis with Python?虽然是英文的,不过看一遍很大收获(可以用百度翻译看一下)Numpy使用快速入门NumpyStac... 阅读全文
posted @ 2018-05-27 20:36 不知道的痛 阅读(430) 评论(0) 推荐(0) 编辑
摘要: 使用Pandas分块处理大文件问题:今天在处理快手的用户数据时,遇到了一个差不多600M的txt文本,用sublime打开都蹦了,我用pandas.read_table()去读,差不多花了近2分钟,最后打开发现差不多3千万行数据。这仅仅是打开,如果要处理不知得多费劲。... 阅读全文
posted @ 2018-05-27 19:37 不知道的痛 阅读(378) 评论(0) 推荐(0) 编辑