2015年2月7日
Sidekiq任务堵塞问题
摘要： 今天发现服务器上的sidekiq 线程全忙。队列里任务积累了好多。 sidekiq里的任务基本都是爬虫脚本，都需要请求外部网站。但是有些网站的响应时间或者读取时间太久，一直一直卡在那里。使得后面的任务不能执行。 所以我们就应该控制请求外部链接的读取时间，避免线程卡住。 在任务里请求外部网站... 阅读全文
posted @ 2015-02-07 16:31 wangyuyu 阅读(1904) 评论(0) 推荐(0) 编辑