摘要: ETL效率优化 开启数据库日志记录及性能监控 如果我们想要优化一个ETL(KTR或者KJB)的性能,我们首先需要知道的就是它的瓶颈在哪里。而这些信息一般只能在ETL运行的步骤度量中看到,并且是不会持久化的。如果你希望把一些数据记录下来,帮助以后进行查阅,那么可以开启数据库日志和性能监控。 作业 具体 阅读全文
posted @ 2019-09-20 17:34 minbk5718 阅读(1930) 评论(0) 推荐(0) 编辑
摘要: 本文链接:https://blog.csdn.net/xpliruizhi123/article/details/54580850 最近发现KETTLE抽数越来越慢,特别是增量INSERT/UPDATE的时候,速度已经达到了令人发指的地步(从一个400W数据规模的表中每天增量量抽取30W数据的TRA 阅读全文
posted @ 2019-09-20 17:26 minbk5718 阅读(981) 评论(0) 推荐(0) 编辑