摘要: (1)假如需要实现的需求是 SUM(COUNT(DISTINCT moengageuserid)) OVER (PARTITION BY eventname, date(from_unixtime(time_bucket)) ORDER BY eventname, time_bucket) AS r 阅读全文
posted @ 2021-12-11 23:46 5sdba 阅读(38) 评论(0) 推荐(0) 编辑
摘要: (1)如有用成熟的监控系统prometheus或者zabbix等开源的监控系统,没必要单独自己写脚本来取值监控,有时兴趣来了写了个简单的脚本,监控mysql与postgres数据库lag: #coding=utf-8 import pymysql,psycopg2 import requests,d 阅读全文
posted @ 2021-12-11 22:49 5sdba 阅读(65) 评论(0) 推荐(0) 编辑
摘要: [2021-08-18 18:58:06] [53100] ERROR: could not resize shared memory segment "/PostgreSQL.2141330937" to 33554432 bytes: No space left on device [2021- 阅读全文
posted @ 2021-08-28 13:11 5sdba 阅读(488) 评论(0) 推荐(0) 编辑
摘要: 有时少量数据再excel里面需要把2个sheet用某个列关联查询,补充另外一个列属性,这个再数据库里面直接left join就可以了,学习了下直接用excel的vlookup来关联。 wps的提示还是很友好的,找了下教程就实现了,前提是不管是再一个sheet还是2个sheet,关联的字段要再第一个列 阅读全文
posted @ 2021-07-24 10:48 5sdba 阅读(167) 评论(0) 推荐(0) 编辑
摘要: (1)谷歌云monitoring服务里面创建自定义查询,发送到日志接收器,过滤gke日志如下: (2)日志接收器选一个类似kafka的组件(pub/sub),然后针对那个topic创建消息订阅,再其创建日志触发器(python脚本),产生一条日志,就会实时发送到kakfa,然后被订阅者消费,同时触发 阅读全文
posted @ 2021-07-10 21:24 5sdba 阅读(260) 评论(0) 推荐(0) 编辑
摘要: (1)编写docker-compose主要服务配置文件: version: '3.8' volumes: prometheus_data: {} grafana_data: {} networks: front-tier: back-tier: services: prometheus: image 阅读全文
posted @ 2021-06-20 21:06 5sdba 阅读(652) 评论(0) 推荐(0) 编辑
摘要: #!/usr/bin/env bash webhook='https://oapi.dingtalk.com/robot/send?access_token=xxxx' #dt=`date --date='5 min ago' "+%Y-%m-%d %H:%M:%S"` dt=`date -d '- 阅读全文
posted @ 2021-06-06 14:01 5sdba 阅读(193) 评论(0) 推荐(0) 编辑
摘要: 把aws云redis 5.x(不支持慢日志输出到cloudatch)慢日志采集到mysql库,方便查询: table ddl: create table redis_log ( session_id int null, host_ip varchar(100) null, start_time da 阅读全文
posted @ 2021-05-22 19:33 5sdba 阅读(74) 评论(0) 推荐(0) 编辑
摘要: 谷歌没有提供钉钉告警之类的,用习惯了钉钉告警的有点不习惯,于是自己研究看文档写了一个。 (1)用谷歌云pub/sub创建日志流 (2)添加pub/sub监控告警订阅消息通知 (3)基于pub/sub消息订阅编写cloud function函数处理实时消息。 脚本日下: ## ## 让读书成为一种生活 阅读全文
posted @ 2021-05-16 18:58 5sdba 阅读(192) 评论(0) 推荐(0) 编辑
摘要: 1:查询每个用户所属用户组: select a.email,b.name from metabase.core_user a left join (select ma.user_id,group_concat(pg.name) as name from permissions_group_membe 阅读全文
posted @ 2021-05-12 12:07 5sdba 阅读(217) 评论(0) 推荐(0) 编辑