随笔分类 - B 职能：故障处理
摘要：zabbix监控centos备份是否成功 工作场景 我们有一台容器部署的showdoc需要每天备份一次数据目录，想通过脚本进行备份，然后通过zabbix监控是否备份成功，如果不成功的话，就会进行报警。 # showdoc的部署参见showdoc官网https://www.showdoc.com.cn
阅读全文
摘要：zabbix常见故障1—时间问题 故障现象 故障分析 **System time is out of sync (diff with Zabbix server > 60s** 通过报错信息来看就是被监控的主机与zabbix server的时间不同步所导致。 故障解决 可以有多种解决办法，比如 1、
阅读全文
摘要：SYN flood攻击 发现网络故障就像人类的疾病一样，在表面很难看出问题的症结所在，疾病的产生往往是一连串的异常所至； 故障初现 杭州分公司报告异常说有一个网段速度特别慢，我远程连接过去发现确实如此，ping 外网一会挺顺畅，过一小会儿延迟就会特别大，而且会丢包，这个网段当中电脑不多，而且没有策略
阅读全文
摘要：IP的假象 当我们插上一个网卡的时候，在系统当中就会出现一个网卡，然后我们就可以在网卡上配置IP地址，在这里就出现一个幻觉，我们认为IP是配置在网卡上的，其实IP并不是配置在网卡上的，而是配置在内核上的，知道这个事实，有时候就给帮我们解决大问题； 我们有一台服务器，有两个IP，192.168.100
阅读全文
摘要：我工作的一天 拓扑如下图所示： 如上所示，连接门禁和监控的网段是一个完全独立的网段，与外网并没有直接的联系。 发现到解决用时 从发现问题到定位到问题，到最终解决问题用了大概用了8个小时的时间。 定位问题期间，复现问题8次，解决过程总结成如下内容； 故障初现 2021/3/5(周五)中午11点左右，公
阅读全文
摘要：现在是2021年02月08日，23点46分，嗯，我还没有睡觉，今天遇到一个小故障，如上所示，当我给某个虚拟机做完了ovf的导出之后，却发现无法开机，报错提示:”无法在当前状况（已关闭电源）下执行……”，怎么回事？有点慌了，可千万不再出事，特么今天刚放假！在紧张的同时还有一点兴奋，兴奋的是又遇到一个故
阅读全文
摘要：怎样在交换机判断是否出现环路了呢？ 通过查看mac地址就可以判断出来，有的mac地址一会出现在这个接口，一会儿又会出现在另一个接口，这就是mac地址漂移，如果主机少了这么判断可以，如果主机特别多，就难以这么判断了； 幸好有的厂家的交换自带环路检测功能，通过下面这条命令就可以判断出来 Display
阅读全文
摘要：[TOC] 排除故障的总结 遇到服务器故障，问题出现的原因很少可以一下就想到。我们基本上都会从以下步骤入手： 一、前因后果 必须搞清楚的问题有： 故障的表现是什么？无响应？报错？ 故障是什么时候发现的？ 故障是否可重现？ 有没有出现的规律（比如每小时出现一次） 最后一次对整个平台进行更新的内容是什么
阅读全文
摘要：目录由于防火墙默认规则导致ospf无法正常建立邻接关系 由于防火墙默认规则导致ospf无法正常建立邻接关系 无论是哪家厂商的防火墙，配置思路都是一样的，而且还有一点相同，都会分成几个区域，我们拿结为防火墙来举例子，默认分成三个区域：信任区（级别85），dmz(级别50)、，untrust（5），lo
阅读全文
摘要：事后想了一下，这个问题其实有更好解决办法，并不用两头抓包的，我们只要看看RST包里面的TTL值和三次握手时的TTL值是不是一样，如果是一样的话，就说明RST包就是我们的存储发出来的，如果不是，那就是有路由设备在中间搞鬼，代理我们的存储发出RST报文。
阅读全文
摘要：NFS协议故障分析 前言 下面是最近我远程在我们市某个高校机房处理的一则故障，我觉很有意思，分享一下。 此篇文章不过多解释NFS的一些基础操作，有关基本操作和基本概念请看我另一篇博文： https://www.cnblogs.com/yizhangheka/p/12079312.html 环境描述：
阅读全文
摘要：想法总是好的，这种思路在windows server上是好使的，但是在linux系统上却是行不通，因为有很多服务是需要root这个名称做授权，并不仅仅像windows那样，认UID，而不认用户名。
阅读全文
摘要：上星期山东大学的存储出毛病，我去了一趟，搞了半天原来是光纤接触不好，但是在和李主任一块排障的过程当中出现了一个很有意思的故障。 当前有一台centos6.5的服务器挂载了我们的存储，可以正常开机，并且在服务器外接的显示器上弹出了centos6.5的登录界面，但是登录的时候却是闪退；通过网线连接上服务
阅读全文
摘要：今天下午看到zabbix上报警，提示有一台测试服务器硬盘快要满了，用量已经超过了百分之八十，我是这么做的： 第一步：首先通过df -h查看一下哪个路径下的空间用量比较大，结果发现是/下占用的空间比较多 [root@kk var]# df -h Filesystem Size Used Avail U
阅读全文
摘要：开发部门有一台闲置的服务器，是老板不知道从哪里搞来的，就放到开发部门让他们做一些测试用，今天开发的同事告诉我，他在登录系统时老是提示you have new mail in /var/spool/mail/root ！ 我一猜就知道他们肯定又自己写定时任务了，这样的事已经发生过好几回了，一个写代码的
阅读全文
摘要：公司新来的小伙中午吃过饭之后找到我，脸色不太自然地告诉我说新上的那台服务器有点不对劲！ 我佯装镇定的吃完了剩下的炸酱面，然后登录上了服务器，还好，能登录上！但是命令提示符却变成了这样，与之前不一样了，变成了这样： -bash-4.2$ 我问他之前做了什么?他说之前就是执行了一个脚本，我登录堡垒机看了
阅读全文
摘要：客户公司的开发搞了大半年，搞出来了一个网站，这个网站怎么说呢？我觉得就是ERP、OA一个集合，先不说这个网站如何，刚上线了1天，再次打开之后就出来了这样的弹窗： 老板很是焦灼，要求赶紧弄好了！ 经常一番百度和开发的讨论，我们一直认为是代码被改动了，查看之后果然发现了一段可疑的代码，本来想要开发自己修
阅读全文
摘要：今天服务器意外断电，电源恢复之后重启时却报错，无法启动！报错信息如下所示： 整理一下报错信息： checking filesystems #从这里就就可以看出来，应该是文件系统出了问题 /contians a file system wite errors, check forced Error r
阅读全文
摘要：今天去德州银行处理存储的事，结果机柜里面都是满的，没有地方放置了，只能下架一台服务器，但是服务器上运行的是什么服务，主任也不确定，root密码也给忘了！只能重置密码了。 第一步：重启服务器，在内核引导界里，按e进入内核编辑界面 第二步：在linux6这行最后追加rd.break参数，然后按ctrl+
阅读全文
