2019年11月16日

superset采集流程

摘要: superset采集流程: 先从业务的bi从库oride-slave-bi(10.52.123.212)去拿数,然后计算(每10分钟由airflow调py代码),放到bi的库(BI业务-数据指标存储10.52.149.112)由superset显示出来. 还有一部分数据是由算法的redis来 痛点: 阅读全文

posted @ 2019-11-16 20:21 锋锋2019 阅读(159) 评论(0) 推荐(0) 编辑

站点初始化

摘要: 站点初始化:1/ 建vpc:简单的方法是用默认的vpc和交换机建立一个ECS,就会让你选一个默认VPC和默认交换机 也可以自己建,规划好ip段:https://help.aliyun.com/document_detail/100380.html?spm=a2c4g.11186623.6.558.3 阅读全文

posted @ 2019-11-16 17:08 锋锋2019 阅读(168) 评论(0) 推荐(0) 编辑

IT管理

摘要: IT管理:变更管理:1/ 简单版,效率高类似数仓拉一个相关群,先和业务确定时间,然后在群里发通知。通知模板:@所有人 通知 :hive 计算集群停30分钟 原因: 当前数据量增多,hue 查询内存不足 影响: hive 无法使用 调整时间: 今天21:20,调整时间30分钟 运维: @所有人 通知: 阅读全文

posted @ 2019-11-16 16:26 锋锋2019 阅读(135) 评论(0) 推荐(0) 编辑

udb主从不同步排错

摘要: Last_SQL_Errno:1032Last_SQL_Error:Could not execute Update_rows event on table oride_data.data_system_config; Can't find record in 'data_system_config 阅读全文

posted @ 2019-11-16 14:59 锋锋2019 阅读(242) 评论(0) 推荐(0) 编辑

导航