锋锋2019

摘要： superset采集流程: 先从业务的bi从库oride-slave-bi(10.52.123.212)去拿数,然后计算(每10分钟由airflow调py代码),放到bi的库(BI业务-数据指标存储10.52.149.112)由superset显示出来. 还有一部分数据是由算法的redis来 痛点: 阅读全文

摘要： 站点初始化：1/ 建vpc:简单的方法是用默认的vpc和交换机建立一个ECS，就会让你选一个默认VPC和默认交换机 也可以自己建，规划好ip段:https://help.aliyun.com/document_detail/100380.html?spm=a2c4g.11186623.6.558.3 阅读全文

摘要： IT管理：变更管理：1/ 简单版，效率高类似数仓拉一个相关群，先和业务确定时间，然后在群里发通知。通知模板：@所有人 通知 ：hive 计算集群停30分钟 原因： 当前数据量增多，hue 查询内存不足 影响： hive 无法使用 调整时间： 今天21：20，调整时间30分钟 运维： @所有人 通知： 阅读全文

摘要： Last_SQL_Errno:1032Last_SQL_Error:Could not execute Update_rows event on table oride_data.data_system_config; Can't find record in 'data_system_config 阅读全文

摘要： 创建报警模板: 可以从现有模板导入: 设定指标: #通知人管理,可以设置报警短信通知人: #给主机绑定告警模板: 勾选要绑定的主机 点设置: #选择要添加的告警模板 阅读全文

摘要： LoadAverage 要想获得服务器的CPU负载情况，有下面几种命令：1/ [root@airflow-1 ~]# w 08:30:15 up 1 day, 21:44, 6 users, load average: 3.89, 3.23, 4.342/ top3）top命令 [root@loca 阅读全文

摘要： 参考: https://cloud.tencent.com/developer/article/1452633 确保你的企业微信已更新到最新（2.8.7）。然后拉一个群（至少3个人），在群里点右上角，添加成员的下方会多出来一个“群机器人” 拿到webhook地址就算完成了 在linux给机器人发信息 阅读全文

摘要： 参考: https://github.com/teamclairvoyant/airflow-scheduler-failover-controller 1.stop failover2.stop scheduler3.clear failover meta4.start failover #启动m 阅读全文

摘要： 源码: https://github.com/teamclairvoyant/airflow-scheduler-failover-controller #怎么判断scheduler是running的, is_scheduler_running https://github.com/teamclai 阅读全文

摘要： 装饰器：又叫包装函数 作用: 1. 添加说明,提醒等. 2. 添加登,验证陆装饰器 原理是在执行student时会把student作为deco的参数传到deco中执行,student函数在deco的子函数wrapper中做为参数被执行.(即在装饰器的装饰下执行函数) def deco(func): 阅读全文