天坑,os root密码过期,导致主机crontab自动任务罢工
告警 clickhouse日志报错 访问的表不存在!
明明我们设定crontab定时任务了啊,怎么没有建表呢?查看crontab定时任务及其进程运行情况
crond为 active 且 启动在 7 months 9 days ago,但是有信息显示 expired password for user root,任务没有如期执行原因指向 root 密码过期。
先登录主机把root的过期密码改了,再手动跑crontab的自动建表任务,业务恢复!
今天2023/4/10号,crontab最后运行时间为2023/3/30号,而我们自动建表任务提前建表的天数正好是10天,完全对得上。天坑,os root密码过期,导致主机crontab自动任务罢工
总结:
1、不要轻易设定主机用户密码过期,可以换成不定时主动修改密码
2、os root密码过期,会影响 crontab 的调度,crontab会停止运行
3、主机日志与核心服务日志可以考虑接入日志采集聚合系统
文章可以转载,必须以链接形式标明出处。