中杯可乐不加冰

摘要： 本文概要 session处理cookie proxies参数设置请求代理ip 基于线程池的数据爬取 引入 有些时候，我们在使用爬虫程序去爬取一些用户相关信息的数据（爬取张三“人人网”个人主页数据）时，如果使用之前requests模块常规操作时，往往达不到我们想要的目的，例如： 一.基于request 阅读全文

摘要： 本文概要: 图片懒加载 selenium phantomJs 谷歌无头浏览器 一、图片懒加载 什么是图片懒加载？ 案例分析：抓取站长素材http://sc.chinaz.com/中的图片数据 #!/usr/bin/env python # -*- coding:utf-8 -*- import re 阅读全文

摘要： requests实现数据爬取的流程： 三种数据解析方式 一、正解解析 常用正则表达式回顾： 常用正则表达式回顾： 回顾练习： 回顾练习： 项目练习： 爬取糗事百科指定页面的糗图，并将其保存到指定文件夹中 项目练习： 二、Xpath解析 测试页面数据 常用xpath表达式回顾 常用xpath表达式回顾 阅读全文

摘要： anaconda指的是一个开源的Python发行版本，其包含了conda、Python等180多个科学包及其依赖项。因为包含了大量的科学包，Anaconda 的下载文件比较大（约 515 MB），如果只需要某些包，或者需要节省带宽或存储空间，也可以使用Miniconda这个较小的发行版（仅包含con 阅读全文

摘要： 基于之前的博客介绍,我们已经了解了 tasks 和 handlers，那怎样组织 playbook 才是最好的方式呢？简单的回答就是：使用 roles ! Roles 基于一个已知的文件结构，去自动的加载某些 vars，files，tasks 以及 handlers。基于 roles 对内容进行分组 阅读全文

摘要： ansible 剧本 yaml介绍： ansible playbook命令格式 执行顺序: 从上往下 特性:幂等性 不管执行多少遍,结果都是一样的 简单用法 传参 第一种方式 第二种方式 第三种方式 第四种方式 第五种传参方式 传参方式的优先级 setup查看配置参数 条件判断 适用于以下情况 不同 阅读全文

摘要： 一、将本地文件上传到远程仓库步骤 二、将项目从远程仓库拉取到本地或为其它开源项目共享自己的一份力 三、.gitignore文件（忽略不需要上传的文件） 四、如何为github上牛逼的开源项目贡献代码 可以先用fork拷贝开源项目到自己的GitHub上，更改别人的bug之后想返回给原项目人使用new 阅读全文

摘要： python 读写 excel 有好多选择，但是，方便操作的库不多，在我尝试了几个库之后，我觉得两个比较方便的库分别是 xlrd/xlwt、openpyxl。 之所以推荐两个库是因为这两个库分别操作的是不同版本的 excel，xlrd 操作的是 xls/xlsx 格式的 excel，而 openpy 阅读全文

摘要： 1.安装nginx 2.安装uwsgi 3.安装django 4.创建django项目 5.创建app 6.修改mysite/settings.py 7.关闭防火墙 关闭内置防火墙selinux 关闭软件防火墙 8、uwsgi配置文件 第一种使用http = 0.0.0.0:8000，对应nginx 阅读全文

摘要： 有人把 Git 的分支模型称为它的`‘必杀技特性’'，也正因为这一特性，使得 Git 从众多版本控制系统中脱颖而出。 为何 Git 的分支模型如此出众呢？ Git 处理分支的方式可谓是难以置信的轻量，创建新分支这一操作几乎能在瞬间完成，并且在不同分支之间的切换操作也是一样便捷。 与许多其它版本控制系 阅读全文