摘要: 一、Scrapy框架 Scrapy架构图(绿线是数据流向图) 1、Scrapy Engine(引擎): 负责 Spider、ItemPipeline、Downloader、Scheduler 中间的通讯,信号、数据传递等。 2、Scheduler(调度器): 它负责接受引擎发送过来的Request 阅读全文
posted @ 2018-12-10 21:00 痴人谈情 阅读(204) 评论(0) 推荐(0) 编辑
摘要: 1、GET请求产生一个TCP数据包;POST请求产生两个数据包。 简单来说就是:对于GET请求,浏览器将http、header、data一并发送出去,服务器响应200 OK(返回数据) 对于POST请求,浏览器发送header,服务器响应100 continue,浏览器再将data发送,服务器响应2 阅读全文
posted @ 2018-12-10 18:54 痴人谈情 阅读(101) 评论(0) 推荐(0) 编辑