God is a girl

摘要： OPS 百度示意:每秒查询率QPS是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 原理：每天80%的访问集中在20%的时间里，这20%时间叫做峰值时间。 公式：( 总PV数 80% ) / ( 每天秒数 20% ) = 峰值时间每秒请求数(QPS) 。 机器：峰值时间每秒QPS / 阅读全文

摘要： CGI(Common Gateway Inteface) 是外部应用程序与Web服务器之间的接口标准(通用网关接口) linux下python比较常见的服务端结构： 网站项目结构图 FastCGI: CGI的一个扩展， 提升了性能，废除了 CGI fork and execute （来一个请求 fo 阅读全文

摘要： docker入门 什么是docker docke用场景 web应用的自动化打包和发布 自动化测试和持续集成、发布 在服务型环境中部署和调整数据库或其他应用 为什么要用docker？ 我们先看看很久很久以前，服务器是怎么部署应用的！ 由于物理机的诸多问题，后来出现了虚拟机 docker与虚拟机的区别 阅读全文

摘要： python模块学习 openpyxl openpyxl模块介绍 openpyxl模块是一个读写Excel 2010文档的Python库，如果要处理更早格式的Excel文档，需要用到额外的库，openpyxl是一个比较综合的工具，能够同时读取和修改Excel文档。其他很多的与Excel相关的项目基本 阅读全文

摘要： linux考试题 1.在登录Linux时，一个具有唯一进程ID号的shell将被调用，这个ID是什么(b) A.NID B.PID C.UID C.CID 答： w命令查看用户tty终端信息 ps ef|grep pts/0 2.下面那个用户存放用户密码信息(b) A./boot B./etc C. 阅读全文

摘要： scrapy的中间件 下载中间件 作用: 处于引擎和下载器之间,因此该中间件可以批量拦截整个工程中发起所有的请求和响应 拦截请求可进行的操作 进行代理IP request.meta['proxy'] = 'http://ip:port' 进行UA伪装 request.headers['User Ag 阅读全文

摘要： scrapy框架 什么是框架? 其实就是一个具有很强通用性且集成了很多功能的项目模板. 如何学习框架: 掌握框架的功能,可以熟练使用每一种功能即可. scrapy: 集成了异步操作,高性能的数据解析,高性能的持久化存储....... 环境的安装: a. pip3 install wheel 使用流程 阅读全文

摘要： selenium 什么是selenium 一款基于浏览器自动化的模块 和爬虫的关联: 模拟登录 便捷的获取动态加载的数据 缺点: 爬取数据的效率底 环境部署繁琐 模块下载: pip install selenium selenium如何获取动态加载的数据 环境安装:pip install selen 阅读全文

摘要： 2.python数据结构的性能分析 一.引言 现在大家对 大O 算法和不同函数之间的差异有了了解。本节的目标是告诉你 Python 列表和字典操作的 大O 性能。然后我们将做一些基于时间的实验来说明每个数据结构的花销和使用这些数据结构的好处。重要的是了解这些数据结构的效率，因为它们是本博客实现其他数 阅读全文

摘要： 数据结构&算法的引言+时间复杂度 一.什么是计算机科学？ 首先明确的一点就是计算机科学不仅仅是对计算机的研究，虽然计算机在科学发展的过程中发挥了重大的作用，但是它只是一个工具，一个没有灵魂的工具而已。所谓的计算机科学实际上是对问题、解决问题以及解决问题的过程中产生产生的解决方案的研究。例如给定一个问 阅读全文