ElasticSearch之禁用交换分区

合集 - ElasticSearch(59)

1.ElasticSearch之安装2023-11-21 2.ElasticSearch之查看集群的参数2023-11-22 3.ElasticSearch之健康状态2023-11-22 4.ElasticSearch的日志配置2023-11-22 5.ElasticSearch之cat aliases API2023-11-23 6.ElasticSearch之Health API2023-11-23 7.ElasticSearch之Nodes info API2023-11-23 8.ElasticSearch之系统关键配置2023-11-23 9.ElasticSearch之cat allocation API2023-11-23 10.ElasticSearch之cat anomaly detectors API2023-11-23 11.ElasticSearch之cat component templates API2023-11-23 12.ElasticSearch之配置2023-11-23 13.ElasticSearch之cat count API2023-11-23 14.ElasticSearch之cat data frame analytics API2023-11-24

15.ElasticSearch之禁用交换分区2023-11-24

操作系统将进程加载至内存中执行时，对于当前未使用到的内存页，可能会将相关内存页交换至硬盘上，即swap。
对于性能敏感、时延敏感的应用程序比如ElasticSearch，swap特性会明显影响性能和稳定性，因此最好禁用swap特性。
对于Linux环境，目前有如下手段可以禁用swap特性。

临时关闭swap的方法，执行如下命令：

 sudo swapoff -a

本方法不需要重启Linux系统，但系统重启后即失效。

修改/etc/fstab，去掉包含swap的行，这样系统重启后，就不会自动挂载swap相关的分区。

 # /etc/fstab: static file system information.
#
# Use 'blkid' to print the universally unique identifier for a
# device; this may be used with UUID= as a more robust way to name devices
# that works even if disks are added and removed. See fstab(5).
#
# <file system> <mount point>   <type>  <options>       <dump>  <pass>
# / was on /dev/sda8 during installation
UUID=124a4216-e11f-4dfb-9884-ea53ee46c8d8 /               ext4    errors=remount-ro 0       1
# swap was on /dev/sda9 during installation
UUID=317d9a34-6d00-4278-bcaa-bcb3b37fc58c none            swap    sw              0       0

修改vm.swappiness的值为1，可以极大的降低进程的内存页被交换至硬盘的概率。

查看Linux系统当前vm.swappiness的值，执行如下命令：

 cat /proc/sys/vm/swappiness

输出如下：

或者执行如下命令：

 sysctl vm.swappiness

输出如下：

 vm.swappiness = 20

修改vm.swappiness的值，执行如下命令：

 sudo sysctl -w vm.swappiness=30

输出如下：

 vm.swappiness = 30

利用Linux系统的mlockall方法，禁止将内存页交换至硬盘。
修改ElasticSearch的配置文件elasticsearch.yml，增加如下参数：

 bootstrap.memory_lock: true

修改后需要重启ElasticSearch进程。

检查mlockall是否生效，执行如下命令：

 curl -X GET "https://localhost:9200/_nodes?filter_path=**.mlockall&pretty" --cacert $ES_HOME/config/certs/http_ca.crt -u "elastic:ohCxPH=QBE+s5=*lo7F9"

执行结果的样例，如下：

 {
  "nodes" : {
    "aKgBu7LgS9a6iPYH8n2JPw" : {
      "process" : {
        "mlockall" : false
      }
    }
  }
}

mlockall为true，说明增加参数后，mlockall如预期生效。
mlockall为false，说明增加参数后，mlockall未能生效，原因则可能是运行ElasticSearch的用户缺少锁定内存的权限。

检查当前用户的权限，执行如下命令：

 sudo sh -c "ulimit -a"

执行结果的样例，如下：

 time(seconds)        unlimited
file(blocks)         unlimited
data(kbytes)         unlimited
stack(kbytes)        8192
coredump(blocks)     0
memory(kbytes)       unlimited
locked memory(kbytes) 65536
process              15172
nofiles              1024
vmemory(kbytes)      unlimited
locks                unlimited
rtprio               0

假如判定和权限相关，则有如下解决方法。
在启动ElasticSearch前，使用root用户增加权限，命令样例如下：

 ulimit -l unlimited
./bin/elasticsearch

或者修改/etc/security/limits.conf，增加如下配置。

 # allow user 'elasticsearch' mlockall
elasticsearch soft memlock unlimited
elasticsearch hard memlock unlimited

相关资料

posted @ 2023-11-24 23:32 jackieathome 阅读(108) 评论(0) 编辑收藏举报

jackieathome

ElasticSearch之禁用交换分区

公告

搜索

常用链接

合集

随笔档案

阅读排行榜

评论排行榜

推荐排行榜

最新评论

	# /etc/fstab: static file system information.
	#
	# Use 'blkid' to print the universally unique identifier for a
	# device; this may be used with UUID= as a more robust way to name devices
	# that works even if disks are added and removed. See fstab(5).
	#
	# <file system> <mount point> <type> <options> <dump> <pass>
	# / was on /dev/sda8 during installation
	UUID=124a4216-e11f-4dfb-9884-ea53ee46c8d8 / ext4 errors=remount-ro 0 1
	# swap was on /dev/sda9 during installation
	UUID=317d9a34-6d00-4278-bcaa-bcb3b37fc58c none swap sw 0 0

	{
	"nodes" : {
	"aKgBu7LgS9a6iPYH8n2JPw" : {
	"process" : {
	"mlockall" : false
	}
	}
	}
	}

	time(seconds) unlimited
	file(blocks) unlimited
	data(kbytes) unlimited
	stack(kbytes) 8192
	coredump(blocks) 0
	memory(kbytes) unlimited
	locked memory(kbytes) 65536
	process 15172
	nofiles 1024
	vmemory(kbytes) unlimited
	locks unlimited
	rtprio 0

	# allow user 'elasticsearch' mlockall
	elasticsearch soft memlock unlimited
	elasticsearch hard memlock unlimited