DataFrame的代码构建 - 读取外部数据

 

 

 

 

parquet: 是Spark中常用的一种列式存储文件格式
和Hive中的ORC差不多, 他俩都是列存储格式
parquet对比普通的文本文件的区别:
●parquet 内置schema (列名\列类型\是否为空)
●存储是以列作为存储格式
●存储是序列化存储在文件中的(有压缩属性体积小
posted @   阿飞藏泪  阅读(4)  评论(0)  编辑  收藏  举报
相关博文：
·  DataFrame的代码构建 - 基于RDD方式1
·  Spark开始
·  spark write parquet与text 区别
·  数据库_duckdb读写Parquet文件
·  parquet文件的操作记录
阅读排行：
· 震惊！C++程序真的从main开始吗？99%的程序员都答错了
· 【硬核科普】Trae如何「偷看」你的代码？零基础破解AI编程运行原理
· 单元测试从入门到精通
· 上周热点回顾（3.3-3.9）
· winform 绘制太阳，地球，月球 运作规律
1 2 3
4
点击右上角即可分享
微信分享提示
AI IDE Trae