2019年11月16日

superset采集流程

摘要： superset采集流程: 先从业务的bi从库oride-slave-bi(10.52.123.212)去拿数,然后计算(每10分钟由airflow调py代码),放到bi的库(BI业务-数据指标存储10.52.149.112)由superset显示出来. 还有一部分数据是由算法的redis来 痛点: 阅读全文

posted @ 2019-11-16 20:21 锋锋2019 阅读(158) 评论(0) 推荐(0) 编辑

站点初始化

摘要： 站点初始化：1/ 建vpc:简单的方法是用默认的vpc和交换机建立一个ECS，就会让你选一个默认VPC和默认交换机 也可以自己建，规划好ip段:https://help.aliyun.com/document_detail/100380.html?spm=a2c4g.11186623.6.558.3 阅读全文

posted @ 2019-11-16 17:08 锋锋2019 阅读(165) 评论(0) 推荐(0) 编辑

IT管理

摘要： IT管理：变更管理：1/ 简单版，效率高类似数仓拉一个相关群，先和业务确定时间，然后在群里发通知。通知模板：@所有人 通知 ：hive 计算集群停30分钟 原因： 当前数据量增多，hue 查询内存不足 影响： hive 无法使用 调整时间： 今天21：20，调整时间30分钟 运维： @所有人 通知： 阅读全文

posted @ 2019-11-16 16:26 锋锋2019 阅读(125) 评论(0) 推荐(0) 编辑

udb主从不同步排错

摘要： Last_SQL_Errno:1032Last_SQL_Error:Could not execute Update_rows event on table oride_data.data_system_config; Can't find record in 'data_system_config 阅读全文

posted @ 2019-11-16 14:59 锋锋2019 阅读(241) 评论(0) 推荐(0) 编辑

导航