delta lake 2.0 预览版发布
就在几天前delta lake 2.0 预览版发布了,从功能上来说,官方完全开源了以前一些商业版的特性
包含的一些特性
- cdf 支持,比较适合数据变动处理
- z-order ,可以支持更好的查询过滤处理
- 支持删除列
- 支持动态分片覆盖
说明
以上只是部分,实际上delta lake 现在已经不依赖spark 也可以进行操作了,现在presto,flink,trino 都已经支持了,很值得学习使用了
参考资料
https://databricks.com/blog/2022/06/30/open-sourcing-all-of-delta-lake.html
https://delta.io/blog/2022-05-05-delta-lake-1-2-released/
https://delta.io/blog/2022-04-27-writing-to-delta-lake-from-apache-flink/
https://github.com/delta-io/delta/releases
https://docs.delta.io/2.0.0rc1/delta-change-data-feed.html
https://docs.delta.io/2.0.0rc1/optimizations-oss.html#z-ordering-multi-dimensional-clustering
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
2021-07-03 使用parquetjs 创建parquet 文件
2021-07-03 dremio 数据格式的一些说明
2021-07-03 集成minio sidekick & console 的测试
2019-07-03 nexus 3.17.0 做为golang 的包管理工具
2018-07-03 coredns 代理consul 运行noamd 部署的应用
2014-07-03 AllJoyn 了解