从Pandas快速切换到Polars :数据的ETL和查询

对于我们日常的数据清理、预处理和分析方面的大多数任务,Pandas已经绰绰有余。但是当数据量变得非常大时,它的性能开始下降。

我们以前的两篇文章来测试Pandas 1.5.3、polar和Pandas 2.0.0之间的性能了,Polars 正好可以解决大数据量是处理的问题,所以本文将介绍如何将日常的数据ETL和查询过滤的Pandas转换成polars。

完整文章:

https://avoid.overfit.cn/post/de7324ae4d3541d184e1c5eb579273db

posted @ 2023-04-20 10:05  deephub  阅读(47)  评论(0编辑  收藏  举报