weihuchao

摘要： 1 virtualenv 在开发程序的过程中, 可能要同时开发多个应用程序, 可能需要的运行环境不同, 这个时候就需要virtualenv来形成一个"隔离"的环境 安装virtualenv 创建一个python运行环境 其中--no-site-packages表示Python环境中多有第三方的环境都 阅读全文

摘要： 1 datetime datetime是Python处理日期和时间的标准库 1) 获取当前时间 2) 获得指定日期和时间 其中datetime可以传入参数, 分别是年月日时分秒, 没有的参数置为0 3) datetime转化为timestamp 时间戳timestamp, 是相对于 1970年1月1 阅读全文

摘要： 1 scrapy框架的介绍 安装 查看是否安装完成 scrapy框架是实现爬虫功能的一个软件结构和功能组件集合 scrapy爬虫框架的结构 这5+2的结构, 就是scrapy框架 主要有三条主要的数据流路径 第一条路径 1) Engine通过中间件获得了Spiders发送的请求, 这个请求叫做req 阅读全文

摘要： 1 找到pip目录 C:\Python36\Lib\site-packages\pip\models 2 修改下面的index.py文件 将url设定为 https://pypi.douban.com/ 这样下载的时候就可以使用豆瓣的源进行下载了, 就可以更快捷的完成下载和安装了 阅读全文

摘要： 1 logging模块 logging模块有两个处理方式, 一个是直接使用logging处理, 另一个是生成一个对象, 用对象来处理 1.1 处理方法一 导入logging模块 使用logging.basicConfig来设置配置信息 参数level设置日志级别 参数format可以设置一条日志信息 阅读全文