Django缓存机制
如何提高网站并发量
QPS:Queries Per Second意思是“每秒查询率”,是一台服务器每秒能够相应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。
TPS:是TransactionsPerSecond的缩写,也就是事务数/秒。它是软件测试结果的测量单位。一个事务是指一个客户机向服务器发送请求然后服务器做出反应的过程。客户机在发送请时开始计时,收到服务器响应后结束计时,以此来计算使用的时间和完成的事务个数
-使用cdn
-精灵图
-页面本地缓存
-nginx做负载均衡,后台服务做集群化的部署
-后台缓存(django中的缓存)
-数据库的主从同步
-读写分离
-异步处理(celery:分布式的异步任务框架)
图片防盗链:
-可以通过refer控制
-nginx处理
缓存介绍
在动态网站中,用户所有的请求,服务器都会去数据库中进行相应的增,删,查,改,渲染模板,执行业务逻辑,最后生成用户看到的页面.
当一个网站的用户访问量很大的时候,每一次的的后台操作,都会消耗很多的服务端资源,所以必须使用缓存来减轻后端服务器的压力.
缓存是将一些常用的数据保存内存或者memcache中,在一定的时间内有人来访问这些数据时,则不再去执行数据库及渲染等操作,而是直接从内存或memcache的缓存中去取得数据,然后返回给用户.
Django中的6种缓存方式:缓存的位置
开发调试阶段:没有缓存
缓存到内存中
缓存到数据库
缓存到文件
缓存到redis
Django种缓存的文件配置,其它请见(https://www.cnblogs.com/liuqingzheng/articles/9803351.html#_label1)
文件缓存(把缓存数据存储在文件中)
settings.py配置
CACHES = { 'default': { 'BACKEND': 'django.core.cache.backends.filebased.FileBasedCache', #指定缓存使用的引擎 'LOCATION': 'G:\python\day76\代码笔记\cache', #指定缓存的路径 'TIMEOUT':300, #缓存超时时间(默认为300秒,None表示永不过期) 'OPTIONS':{ 'MAX_ENTRIES': 300, # 最大缓存记录的数量(默认300) 'CULL_FREQUENCY': 3, # 缓存到达最大个数之后,剔除缓存个数的比例,即:1/CULL_FREQUENCY(默认3) } } }
缓存粒度
Django提供了不同粒度的缓存,可以缓存某个页面,可以只缓存一个页面的某个部分,甚至可以缓存整个网站.
全站缓存
单页面缓存
局部缓存
Django中的缓存应用
单页面缓存:在视图函数上方加一个装饰器
视图函数中的缓存
from django.views.decorators.cache import cache_page import time @cache_page(5) #缓存时间为5秒 def index(request): ctime = time.time() return render(request,'index.html',{'time':ctime})
这个时间点击一次五秒后才能继续刷新
这里我们用文件缓存
刷新浏览器,可以看到在刚才配置的目录下生成的缓存文件
通过实验可以知道,Django会以自己的形式把缓存文件保存在配置文件中指定的目录中.
局部缓存
现在两个时间同时刷新,我们现在需要设置当前时间为缓存,需要在前端页面操作
index.html
{#5 是超时时间,test是这个缓存的key,如果这页面写了10个,就没有指定标识去找哪一个,所以test要指定唯一的key值#}
<body> {% load cache %} {{ time }} <br> {% cache 5 'test' %} 当前时间:{{ time }} {% endcache %} </body>
全站缓存
全站就是所有路由都要用到缓存,那就要应该用到Django中间件里.
用户的请求通过中间件,经过 一系列的认证等操作,如果请求的内容在缓存中存在,则使用FetchFromCacheMiddleware获取内容并返回给用户
当返回给用户之前,判断缓存中是否已经存在,如果不存在,则UpdateCacheMiddleware会将缓存保存至Django的缓存之中,以实现全站缓存
FetchFromCacheMiddleware重写了process_request方法
UpdateCacheMiddleware重写了process_response方法
缓存整个站点,是最简单的缓存方法
在 MIDDLEWARE_CLASSES 中加入 “update” 和 “fetch” 中间件
MIDDLEWARE_CLASSES = (
‘django.middleware.cache.UpdateCacheMiddleware’, #第一
'django.middleware.common.CommonMiddleware',
‘django.middleware.cache.FetchFromCacheMiddleware’, #最后
)
“update” 必须配置在第一个
“fetch” 必须配置在最后一个
CACHE_MIDDLEWARE_SECONDS=5 全站缓存都是五秒