摘要: 转载:https://databricks.com/blog/2019/09/24/diving-into-delta-lake-schema-enforcement-evolution.html 在实践经验中,我们知道数据总是在不断演变和增长,我们对于这个世界的心智模型必须要适应新的数据,甚至要应 阅读全文
posted @ 2020-04-29 16:50 大葱拌豆腐 阅读(544) 评论(0) 推荐(0) 编辑
摘要: Spark SQL支持通过DataFrame接口在各种数据源上进行操作。DataFrame可以使用关系变换进行操作,也可以用来创建临时视图。将DataFrame注册为临时视图允许您对其数据运行SQL查询。本节介绍使用Spark Data Sources加载和保存数据的一般方法,然后介绍可用于内置数据 阅读全文
posted @ 2020-04-29 10:19 大葱拌豆腐 阅读(713) 评论(0) 推荐(0) 编辑