摘要：
今天下午17:00-17:05之间，在请求量没有明显变化的情况下，SLB中的1台云服务器的CPU突然串到100%（当时SLB中一共有3台云服务器）。造成的直接后果是请求执行时间变得超长，最长竟然达到了53秒。另外伴随的表现是大量请求排队。从这些现象分析，我们猜测CPU 100%那台云服务器出现了CPU资源争抢问题。 阅读全文
摘要：
“黑色1秒”问题经过一个多月的艰苦奋战，今天终于取得了重要进展！我们终于有了足够的数据证明不是微软IIS的问题，就是阿里云Xen虚拟机的问题。这篇博文分享的是我们如何进行证明的，而且这次证明连Window性能监视器都不需要。下面我们来分析一下今天10:37:35出现的“黑色1秒” 阅读全文
摘要：
（注：由于阿里云SLB管理控制台监控数据不准，实际故障时间是18:07-18:20。）17:55-18:2018:07-18:20，我们使用的阿里云SLB（负载均衡）中有3台出现突发故障，造成全站无法访问，给您带来了麻烦，请谅解！目前已经恢复正常，从阿里云那得知的故障原因是——由于杭州地区的SLB所... 阅读全文
摘要：
热点随笔： · 为生活可以忍，侮辱技术行不行？（沈逸） · 程序员跳槽注意事项（麒麟子(Alex)） · 中国的程序员们是否要声援微软小冰？（徐少侠） · 让 asp.net 在 mac 上飞（linli8） · 一次由注释引发的“血案”（An... 阅读全文
摘要：
当今天早上在日志中发现这样的错误之后，对阿里云OCS（mecached缓存服务）的积怨倾泻而出。这个问题我们4月份发现过的，当时给OCS起了个外号叫“会断连接的memcached”，用了近1个月时间才解决。这次升级后又出现了，虽然不是故意为之，但是如果是淘宝用的memcached，你们敢断连接吗？ 阅读全文
摘要：
向大家分享一下最近排查“黑色1秒”问题的进展，“黑色1秒”的问题表现详见什么是黑色1秒。1.发生在w3wp进程内；2.请求未进入.NET线程池；3.发生在处于user-mode的IIS核心模块；4.最大的两个嫌疑对象：w3tp与w3dt。 阅读全文
摘要：
我们用的Memcached缓存服务是阿里云OCS，今天晚上遇到了一次OCS挂掉的情况（计划中的升级），看一下性能监视器中的表现，也许对分析黑色1秒问题有帮助。 阅读全文
摘要：
今天下午遇到了自使用阿里云以来首次遇到的新情况——http.sys的ArrivalRate突降（说明请求到达IIS的请求数量少了），而且SLB中的3台ECS都出现了这个问题。初步怀疑是SLB或者SLB的网络问题，已向阿里云提交了工单。 阅读全文
摘要：
今天早上9:06左右，Windows性能监视器监测到主站的Web服务器出现了CPU 100%的情况，伴随着Requests/Sec的上升。QPS最高冲到了601。IIS的Current Connections也随之上升。 阅读全文
摘要：
这篇博文记录一下6月1日在阿里云上遇到的奇怪的CPU 100%问题，希望多年以后能真相大白。那天负载均衡（SLB）中只放了1台云服务器（平时都放2台），由于是节假日，虽然只放了一台，但这台服务器的负载也没有平时高。但在上午的时候突然出现了CPU 100%问题，然后切换到另外一台云服务器恢复正常。 阅读全文