linux tomcat 服务器抛出socket异常 Too many open files 的问题

       刚刚做的一个关于设备信息采集的程序,通过openstack的ceilometer接口,获取openstack管理下的虚拟机的设备状态信息。在公司的内网服务器上调试成功后,拿到客户现场测试,部署好以后,都能够完美的运行和使用,但是当我回到家,准备过我的周末时,现场的同事打过来电话说,程序吐不出数据了??? WHAT ? WHY ?带着一肚子的疑问,打开自己的本本,远程连上客户现场的设备,发现Tomcat容器宕机啦,我哩个神啊,怪不得吐不出数据呢,赶紧回个电话说,稍等。。。
       仔细看了看后台的错误log,发现慢慢的全是“Too many open files”、“Too many open files”、“Too many open files”。。。而且,tomca也无法正常的shutdown,折腾了好久,因为现场着急测试,就用粗暴的方式,将项目铲掉,重新上传个war包,先跑起来。。。
       回头在网上搜索一把后,发现这个问题不是我之前猜想的程序本身的原因,tomcat所在的设备是台虚机,都是按照常规的配置走的,刚开始运行时,程序的吞吐数据量和任务都不多,也不会超出设备的限额,当运行了2天后,运行的任务和吞吐的数据量急剧上升,设备就先吃不消了。。。所以就出现了问题。

       java.net.SocketException: Too many open files
        ......

    这个问题的出现原因是system对程序打开files数量的限制问题。

    用 ulimit -a 命令可以查看

查看系统目前资源限制的设定。
[root@xxx]# ulimit -a
core file size        (blocks, -c) 0
data seg size         (kbytes, -d) unlimited
file size             (blocks, -f) unlimited
max locked memory     (kbytes, -l) unlimited
max memory size       (kbytes, -m) unlimited
open files                    (-n) 1024
pipe size          (512 bytes, -p) 8
stack size            (kbytes, -s) 8192
cpu time             (seconds, -t) unlimited
max user processes            (-u) 7168
virtual memory        (kbytes, -v) unlimited
[root@xxx]#
那么我们可以通过一下命令修改该参数的最大值
ulimit -n 4096
[root@xxx]# ulimit -n 4096
[root@xxx]# ulimit -a
core file size        (blocks, -c) 0
data seg size         (kbytes, -d) unlimited
file size             (blocks, -f) unlimited
max locked memory     (kbytes, -l) unlimited
max memory size       (kbytes, -m) unlimited
open files                    (-n) 4096
pipe size          (512 bytes, -p) 8
stack size            (kbytes, -s) 8192
cpu time             (seconds, -t) unlimited
max user processes            (-u) 7168
virtual memory        (kbytes, -v) unlimited
这样我们就修改了系统在同一时间打开文件资源的最大数,基本解决以上问题。

    可以看出,对open files的限制数是1024,我们可以通过修改这个值来增加可以打开的文件数。

    临时修改:

    将其改为4096,用 ulimit -n 4096.

    当你把open files的值增大到一定程度,你的Too many open files就不会再出现了。

    若要 长久 改变这两个参数值,就要修改/ect/security/limits.conf,在文件中加上两行:

    * - nofile 65535

    * - nproc 65535

注:这行设置了每个用户的默认打开文件数为2048。 注意"nofile"项有两个可能的限制措施。就是<type>项下的hard和soft。 要使修改过得最大打开文件数生效,必须对这两种限制进行设定。 如果使用"-"字符设定<type>, 则hard和soft设定会同时被设定。

      硬限制表明soft限制中所能设定的最大值。 soft限制指的是当前系统生效的设置值。 hard限制值可以被普通用户降低。但是不能增加。 soft限制不能设置的比hard限制更高。 只有root用户才能够增加hard限制值。

      当增加文件限制描述,可以简单的把当前值双倍。 例子如下, 如果你要提高默认值1024, 最好提高到2048, 如果还要继续增加, 就需要设置成4096。

      最后用ulimit -a再次查看,open files的值,没什么问题的话,就已经改过来了。

      经过以上设置,退出shell再次登录,还是不生效,来点绝的

      到//etc/profile下,加入一行ulimit -SHn 51200 (注意里面已经有一条关于ulimit的设置)

      到rc.local下,加入一行 ulimit -SHn 51200 (不知这条有没有必要,其实我还没加)

      ulimit -S -c 0 > /dev/null 2>&1

     这条语句设置了对软件资源和对core文件大小的设置

ps:也有网友说:设置完了之后要重启。。。。linux又不是window系统,干嘛要重启,Linux可是强大的UINX内核好吧!
posted @ 2022-01-27 18:36  zhangdaopin  阅读(119)  评论(0编辑  收藏  举报