05 2023 档案

自定义HiveHook
摘要：1.背景 采用华为的DGC+MRS套件，目前两套系统没有彻底打通，所以对SQL资源占用情况不够详细，无法清晰知道哪段脚本（或者表）长时间占用大量计算资源。所以需要搞一个中间系统把DGC和MRS关联起来。 2.方法 计划采用HiveHook的方式把所有的SQL提交内容记录下来存储到HDFS，尤其是qu 阅读全文
posted @ 2023-05-26 16:15 人不疯狂枉一生 阅读(129) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示