数据库缓存
1.What
a) mysql等一些常见的关系型数据库的数据都存储在磁盘当中,在高并发场景下,业务应用对mysql产生的增删改查操作造成巨大的I/O开销和查询压力,这无疑对数据库和服务器都是一种巨大的压力,为了解决此类问题,缓存数据的概念应运而生。
b) 极大地解决数据库服务器的压力
c) 提高应用数据的响应速度
d) 常见的缓存形式:内存缓存(可避免I/O开销)、文件缓存
2.Why
a) 缓存数据是为了让客户端减少甚至不访问数据库服务器进行数据的查询,高并发下,能最大程度地降低对数据库服务器的访问压力。
b) 默认不使用缓存时的情况:用户请求-》数据查询-》连接数据库服务器并查询数据-》将数据缓存起来(HTML、内存、JSON、序列化数据)-》显示给客户端
c) 用户再次请求或者新用户访问-》数据查询-》直接从缓存中获取数据-》显示给客户端
注意:缓存需要考虑的内容(缓存方式的选择、缓存场景的选择、缓存数据的实时性)
3.使用Mysql查询缓存(粒度小,了解下即可)
a) 启用mysql查询缓存 query_cache_type(0:不使用1:始终使用2:按需使用)
1.query_cache_type=1时,也可以关闭查询缓存:Select SQL_NO_CACHE * from table where condition;
2.默认情况下Query_cache_size为0,表示为查询缓存预留的内存为0,则无法使用查询缓存;set global query_cache_size = 11334;//通过语句修改
b) 极大地降低CPU使用率
c) 查询缓存可以看作是SQL文本和查询结果的映射;第二次查询的SQL和第一次查询的SQL完全相同,则会使用缓存;表的结构或数据发生改变时,查询缓存中的数据不再有效。Show status like `Qcache_hits`;//查看命中次数
d) 清理缓存
flush query cache; //清理查询缓存内存碎片
reset query cache; //从查询缓存中移出所有查询
flush tables;//关闭所有打开的表,同时该操作将会清空查询缓存中的内容
4.使用memcache缓存
对于大型站点,如果没有中间缓存层,当流量打入数据库层时,即便有之前的几层为我们挡住一部分流量,但是在大并发的情况下,还是会有大量请求涌入数据库层,这样对于数据库服务器的压力冲击很大,响应速度也会下降,因此添加中间缓存很有必要。
memcache是一套分布式的高速缓存系统,很多网站使用以提高网站的访问速度,尤其对一些大型的、需要频繁访问数据库的网站访问速度提升效果十分显著。
a) 工作原理
memcache是一个高性能的分布式的内存对象缓存系统,通过在内存里维护一个统一的巨大的hash表,它能够用来存储各种各样的数据,包括图像、视频、文件、以及数据库检索的结果等。简单的说就是将数据调用到内存,然后从内存中读取,从而大大提高读取速度。
b)工作流程
先检查客户端的请求数据是否在memcached中,如有,直接把请求数据返回,不再对数据库进行任何操作;如果请求的数据不在memcached中,就去查数据库,把从数据库中获取的数据返回给客户端,同时把数据缓存一份到memchached中。(注意过期时间)
c) get(key),set(key,val,expire),delete(key)
d) 通用缓存机制 用查询的方法名+参数 作为查询时的key value对中的key值
5.使用redis缓存
6.比较
a) 性能相差不大
b) Redis2.0版本增加了自己的VM特性,突破物理内存的限制;memcache可以修改最大可用内存,采用LRU算法。
c) redis依赖客户端来实现分布式读写;Memcache本身没有数据冗余机制;redis支持(快照、AOF),依赖快照进行持久化,aof增强了可靠性的同时,对性能有所影响。
d) Memcache不支持持久化,通常做缓存,提升性能;memcache在并发场景下,用cas保证一致性,redis事务支持比较弱,只能保证事务中的每个操作连续执行。
e) redis支持多种类的数据类型
f) redis用于数据量较小的高性能操作和运算上。memcache用于在动态系统中减少数据库负载,提升性能;适合做缓存,提高性能。