Liunx下Mysql,MongoDB性能优化的配置

场景

  这几天在赶十一上线的项目,但是突然发现接口性能不好,高并发支持不住。又不想改代码,就在数据库层面进行优化。

Mysql

  分区:项目中有对40万条的数据进行时间查询的要求,就算对DateTime建立了索引,也十分耗时。这个时候可以用分区,把一个表按一个字段分为多个区,比如创建时间(DateTime类型)。主要分区语句如下:

partition by range COLUMNS(CreateTime)(
        PARTITION 08p1 VALUES LESS THAN ('2009-01-01'),
        PARTITION 09p1 VALUES LESS THAN ('2010-04-01'),
        PARTITION 09p2 VALUES LESS THAN ('2011-07-01'),
        PARTITION 09p3 VALUES LESS THAN ('2012-10-01'),
        PARTITION 09p4 VALUES LESS THAN ('2013-01-01'),
        PARTITION 10p1 VALUES LESS THAN ('2014-04-01'),
        PARTITION 10p2 VALUES LESS THAN ('2015-07-01'),
        PARTITION 10p3 VALUES LESS THAN ('2016-10-01'),
        PARTITION 10p4 VALUES LESS THAN ('2017-01-01'),
        PARTITION 11p1 VALUES LESS THAN ('2018-04-01'),
        PARTITION 11p2 VALUES LESS THAN ('2019-07-01'),
        PARTITION 22p12 VALUES LESS THAN ('2020-01-01'),
        PARTITION p12 VALUES less than MAXVALUE
);        

  在Create Table的sql语句中添加,这里采用的是RANGE 分区,还有其他类型的分区。注意:

    1.之后可以对某一分区进行细分,不会影响数据;用reorganize语句

    2.可以合并分区,不会影响数据;

    3.一定要有less than MAXVALUE,避免有数据不能分配到分区中。

    4.最好把分区的字段设为主键。

  最后,MYSQL中40多万的数据查询耗时到100ms以内。

  配置文件:主要修改以下参数:

    1.innodb_buffer_pool_size。是InnoDB引擎中处理缓存的;

    2.innodb_buffer_pool_instances。

MongoDB

  异步:最好把代码中所有有关增加,查询等操作的都改为异步,可以减少耗时。

  配置文件:主要修改以下参数:

    1.wiredTigerCacheSizeGB。单位是GB,用来设置引擎所使用的缓存大小,默认单例下使用内存的一半。

    2.maxConns = 2000。最大连接数。

Liunx

  主要修改一些系统限制,在/etc/sysctl.conf文件中进行修改,重启生效。

    1.vm.swappiness。值越大,表示越积极使用swap分区,越小表示越积极使用物理内存.

    2.* soft nofile 65535 和 * hard nofile 65535 ,修改每个进程能打开的最大文件数

posted @ 2021-09-28 19:04  陈子白  阅读(136)  评论(0编辑  收藏  举报