Cassandra Error message: Not marking nodes down due to local pause.

这个error可能会在很多时候遇到哦,看到的例子是在replace 300GB的node时候遇到了. 看到的log如下

var/log/cassandra/output.log:WARN 13:44:31,868 Not marking nodes down due to local pause of 53690474502 > 500000000
导致这个问题的最根本原因是gc, 也就是发生了非常长时间的gc, 导致整个系统hang住了
https://issues.apache.org/jira/browse/CASSANDRA-9183
https://issues.apache.org/jira/browse/CASSANDRA-9218
所有的gc都是由于当时有很多的task在做导致的,所以根本上还是要去看下当时是否有其他的heavy task;
执行nodetool tpstats/ nodetool netstats看看在做什么;

这里的log有点奇怪,显示的竟然是WARN, 而不是ERROR;


posted @ 2017-06-29 06:00  jobforlife  阅读(1572)  评论(0编辑  收藏  举报