modin pandas 大规模数据处理方案
摘要:
modin 是一个可以快速替换原生pandas 的方案,我们只需要替换一个简单的引用,就可以将pandas 的数据处理速度有很大的提升modin 支持与不少框架的集成(ray, dask,unidisk),目前modin 对于常用read 操作都有很不错的支持,参考图 参考架构 如下图,可以看出mo 阅读全文
posted @ 2023-10-01 21:57 荣锋亮 阅读(53) 评论(0) 推荐(0) 编辑