会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
关注清哥聊技术公众号,了解更多技术文章
,作者的原创文章,转载须注明出处。原创文章归作者所有,欢迎转载,但是保留版权。对于转载了博主的原创文章,不标注出处的,作者将依法追究版权,请尊重作者的成果。
张永清
人生是一个不断觉悟的过程
博客园
首页
新随笔
联系
管理
订阅
2022年6月7日
如何扩展Spark Catalyst,抓取spark sql 语句,通过listenerBus发送sql event以及编写自定义的Spark SQL引擎
摘要: 1、Spark Catalyst扩展点 -> 关注清哥聊技术公众号,了解更多技术文章 Spark catalyst的扩展点在SPARK-18127中被引入,Spark用户可以在SQL处理的各个阶段扩展自定义实现,非常强大高效,是SparkSQL的核心组件(查询优化器),它负责将SQL语句转换成物理执
阅读全文
posted @ 2022-06-07 13:55 张永清
阅读(876)
评论(0)
推荐(0)
编辑
公告
关注清哥聊技术公众号,了解更多技术文章
,作者的原创文章,转载须注明出处。原创文章归作者所有,欢迎转载,但是保留版权。对于转载了博主的原创文章,不标注出处的,作者将依法追究版权,请尊重作者的成果。