2024年1月29日
pandas高效读取大文件的探索之路
摘要： 使用 pandas 进行数据分析时，第一步就是读取文件。在平时学习和练习的过程中，用到的数据量不会太大，所以读取文件的步骤往往会被我们忽视。 然而，在实际场景中，面对十万，百万级别的数据量是家常便饭，即使千万，上亿级别的数据，单机处理也问题不大。不过，当数据量和数据属性多了之后，读取文件的性能瓶颈就 阅读全文
posted @ 2024-01-29 09:21 wang_yb 阅读(1688) 评论(1) 推荐(3) 编辑