摘要：
架构概览 本文档介绍了Scrapy架构及其组件之间的交互。 概述 接下来的图表展现了Scrapy的架构，包括组件及在系统中发生的数据流的概览(绿色箭头所示)。 下面对每个组件都做了简单介绍，并给出了详细内容的链接。数据流如下所描述。 组件 引擎（Scrapy Engine） 引擎负责控制数据流在系统 阅读全文
摘要：
Python -- Scrapy 框架简单介绍 最近在学习python 爬虫，先后了解学习urllib、urllib2、requests等，后来发现爬虫也有很多框架，而推荐学习最多就是Scrapy框架了，所以这里我也小试牛刀一下。 开始自己的Scrapy 框架学习之路。 一、Scrapy安装介绍 参 阅读全文
摘要：
Python requests快速上手 这里参考官方文档，在ide中写了一遍，加深一下印象，定义的函数只是为了方便区分不同的请求方式 阅读全文
摘要：
Python requests介绍 引用官网介绍 Requests 唯一的一个非转基因的 Python HTTP 库，人类可以安全享用。 Requests 允许你发送纯天然，植物饲养的 HTTP/1.1 请求，无需手工劳动。你不需要手动为 URL 添加查询字串，也不需要对 POST 数据进行表单编码 阅读全文