pg_parquet CrunchyData团队开源的pg parquet fdw

pg_parquet是CrunchyData 团队开源的pg paquet fdw,可以实现parquet 数据通过copy 命令到pg 表中,同时也支持将pg 表写入到parquet 文件中

一些使用场景

  • 就是上边说的,写入或者读取parquet 数据
  • 查看parquet 的元数据以及schema 信息

说明

对于parquet 数据的直接pg 读取为pg 表可以使用pg_duckdb fdw 扩展,进行互补,当然直接使用pg_duckdb fdw 可以解决pg_parquet 对于数据读写能力,可以互补使用

参考资料

https://github.com/CrunchyData/pg_parquet

https://github.com/pgcentralfoundation/pgrx

https://github.com/duckdb/pg_duckdb

posted on 2024-12-11 08:00  荣锋亮  阅读(0)  评论(0编辑  收藏  举报

导航