摘要：
Nginx 下 location模块 可以实现对网页URL进行分析处理 阅读全文
摘要：
一种直接直接是配置在 HTTP 下；一种是 配置 localtion /{ proxy_pass 调用 } 一、http 模块配置示例： 二、proxy_pass 调用 方式 反向代理配置 如下： vi proxy.conf 阅读全文
摘要：
nginx 负载包括四种： 1、轮询 按照请求时间逐一分配到不同的后端服务器； 2、ip_hash 当调度为ip_hash时；后端服务器调度状态不能是 weight 和 backup 3、fair 是根据 页面大小 和加载时间进行只能的负载；也就是根据响应时间分配；nginx本身不支持fair,需要 阅读全文
摘要：
nginx 静态缓存 http 模块配置参考： location 模块 参数解析： 参数解析： 阅读全文
摘要：
http { include mime.types; // 主模块；实现对配置文件包含的文件设定，可以减少主配置文件的复杂度； default_type application/octet-stream; // http 的核心模块指令；默认是设置为二进制流；就是当文件类型未定义时使用这种解析；例如不配置PHP时打开PHP文件就是下载； #log_format main... 阅读全文
摘要：
nginx 全局配置 #user nobody; # user 主模块 ，指定nginx worker 进程的运行用户组 worker_processes 1; # worker_processes 开启进程数 每个nginx进程平均消耗 10-12内存 （CPU 和内核进程数一样） #error_ 阅读全文
摘要：
nginx 整理 nginx 配置主要是分为4个部分 1、main 全局设置2、server 主机设置 -- 指定主机与端口3、upstream 负载均衡服务器设置 -- 反向代理设置；4、location URL 匹配特定位置的设置 -- 匹配网页位置； 可以通过location 指令实现对ngi 阅读全文
摘要：
Scrapy 是采用Python 开发的一个快速可扩展的抓取WEB 站点内容的爬虫框架。 Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。 Scrapy吸引人的地方在于 阅读全文