摘要: 1.解压,配环境变量 2.win上设置自启动 redis server service install D:\redis\redis.windows.conf loglevel verbose 3.启动redis redis server 或 redis server E:\redis\redis 阅读全文
posted @ 2018-04-23 15:16 Leq123 阅读(152) 评论(0) 推荐(0) 编辑
摘要: scrapy 伪装代理和fake_userAgent的使用 伪装浏览器代理 在爬取网页是有些服务器对请求过滤的不是很高可以不用ip来伪装请求直接将自己的浏览器信息给伪装也是可以的。 第一种方法: 1.在setting.py文件中加入以下内容,这是一些浏览器的头信息 USER_AGENT_LIST = 阅读全文
posted @ 2018-04-23 14:27 Leq123 阅读(2468) 评论(0) 推荐(0) 编辑
摘要: 数据库优化 思路:先优化查询语句,再备份后修改 ACID: 原子性(Atomicity)、一致性(Consistency)、隔离性(Isolation)、持久性(Durability)。一个支持事务(Transaction)的数据库,必须要具有这四种特性 1.查询时候尽量不使用 2.查询并添加索引/ 阅读全文
posted @ 2018-04-23 10:35 Leq123 阅读(289) 评论(0) 推荐(0) 编辑