OS + Linux HugePages / Mysql large-pages
s
Linux HugePages及MySQL 大页配置
https://www.cnblogs.com/zengkefu/p/5655057.html
http://blog.csdn.net/dba_waterbin/article/details/9669929
㈠ HugePages简介
HugePages是kernel 2.6引入以便适应越来越大的物理内存
在Linux下、page size默认是4K、如果使用HugePages、默认是2M
再看2个术语:
page table 映射表:物理内存和swap的对应关系、访问内存是先读page table、根据表里的映射关系操作
TLB :cpu cache组件、缓存部分page table以提高转换速度
㈡ MySQL 配置大页
好处
① 提高TLB的命中率
② 利用HugePages不会被Swap 的特性保证MySQL内存不会被交换到Swap中
目前在MySQL中HugePages只被InnoDB所支持
以下简单介绍其配置流程
⑵ 设置大页数量、每页通常2M、20个就40M、系统要有足够的内存待分配
⑶ 增加最大共享内存段的大小、本例12G
⑷ 增加共享内存的大小、每页4K
⑸ 将mysql用户所属组添加到系统内核中
⑹ 再次确认配置情况
⑺ 设置max locked memory
⑻ 配置 my.cnf
⑼ 启动mysqld
⑽ 观察HugePages 使用情况
HugePages是kernel 2.6引入以便适应越来越大的物理内存
在Linux下、page size默认是4K、如果使用HugePages、默认是2M
再看2个术语:
page table 映射表:物理内存和swap的对应关系、访问内存是先读page table、根据表里的映射关系操作
TLB :cpu cache组件、缓存部分page table以提高转换速度
㈡ MySQL 配置大页
好处
① 提高TLB的命中率
② 利用HugePages不会被Swap 的特性保证MySQL内存不会被交换到Swap中
目前在MySQL中HugePages只被InnoDB所支持
以下简单介绍其配置流程
⑴ 配置前:
- [root@cdio ~]# cat /proc/meminfo | grep -i huge
- HugePages_Total: 0
- HugePages_Free: 0
- HugePages_Rsvd: 0
- Hugepagesize: 2048 kB
⑵ 设置大页数量、每页通常2M、20个就40M、系统要有足够的内存待分配
- [root@obe11g ~]# echo 20 > /proc/sys/vm/nr_hugepages
⑶ 增加最大共享内存段的大小、本例12G
- [root@obe11g ~]# echo 1560281088 > /proc/sys/kernel/shmmax
⑷ 增加共享内存的大小、每页4K
- [root@obe11g ~]# echo 4194304 > /proc/sys/kernel/shmall
⑸ 将mysql用户所属组添加到系统内核中
- [root@obe11g ~]# more /proc/sys/vm/hugetlb_shm_group
- 0
- [root@obe11g ~]# id mysql
- uid=501(mysql) gid=501(dba) groups=501(dba)
- [root@obe11g ~]# echo 501 > /proc/sys/vm/hugetlb_shm_group
⑹ 再次确认配置情况
- [root@obe11g ~]# cat /proc/meminfo | grep -i huge
- HugePages_Total: 20
- HugePages_Free: 20
- Hugepagesize: 4096 kB
⑺ 设置max locked memory
- [root@obe11g ~]# cat /etc/security/limits.conf | grep -i mysql
- mysql hard memlock unlimited
- mysql soft memlock unlimited
⑻ 配置 my.cnf
- [mysqld]
- large-pages
⑼ 启动mysqld
⑽ 观察HugePages 使用情况
- [root@obe11g ~]# grep -i huge /proc/meminfo
- HugePages_Total: 20
- HugePages_Free: 16
- Hugepagesize: 4096 kB
end
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 单线程的Redis速度为什么快?
· 展开说说关于C#中ORM框架的用法!
· Pantheons:用 TypeScript 打造主流大模型对话的一站式集成库
· SQL Server 2025 AI相关能力初探
· 为什么 退出登录 或 修改密码 无法使 token 失效
2019-06-13 OS + windows server 2012 R2 / windows server 2016 / windows server 2019 / windows server 2022 / windows ad