摘要：
一 scrapy框架简介： 二 scrapy框架的一个整体结构流程： 从上图我们可以把整个框架分为蜈蚣丸部分：SPIDERS、ENGINE、DOWNLOADER、SCHEDULER、ITEM PIPELINES那么没给我组件的功能是什么： 那么这五个部分实际上需要我们写的就是就是SPIDER和PIP 阅读全文
摘要：
一 为什么使用MQ： 二 那么MQ是什么： 三 队列、生产者、消费者 ① 队列是RabbitMQ内部对象，用于存储消息，生产者生产的消息投进队列中，消费者可以从中取消息消费。 ② 多个消费者可以同时订阅一个队列，这个时候队列中的消息会被均分给多个消费者消费，而不是每个消费者都可以拿到所有的消息。 ③ 阅读全文
摘要：
爬虫我们大概可以分为三部分：爬取——》解析——》存储 一 Beautiful Soup： Beautiful Soup 官方文档 下面我们使用Beautiful Soup来解析一段HTML代码： 那么我么可以使用beautiful Soup来进行处理： 二 标签对象 Soup： 通俗点讲就是 HTM 阅读全文
摘要：
一 爬虫简介 爬虫的流程： 二 requests模块 关于requests模块爬虫的流程： requests请求的基本语法： get请求： post请求： 请求响应response： <RequestsCookieJar[<Cookie lianjia_ssid=67748407-774d-497c 阅读全文
摘要：
一 首先我们通过pycharm安装： 发现不行，会报错。 二 通过命令行再次进行安装： 发现还是会报错： 更新下pip，继续安装，发现还是不行，那怎么办呢？ 继续安装Scrapy发下还是不行： 那么我们要找一个合适的版本：我的是python3.6和Windows64 打开连接：https://www 阅读全文
摘要：
一 我们首先要知道解析器是什么以及他的功能： REST framework 包含许多内置的解析器类，允许接受各种媒体类型（media types）的请求。还支持自定义解析器，这使你可以灵活地设计 API 接受的媒体类型。其实就是对不同的数据类型进行解析。 二 关于解析器的一个流程： ① 首先我们在u 阅读全文
摘要：
一 REST framwork分页器： 二 路由器： 在view视图中我们已经将代码进行最大化的简化，但是有一个问题就是我们的urls 中不得不进行传参，以区别不同的GET请求，分别为：Retrieve与List 使用了REST framwork路由器： 三 响应器： 阅读全文
摘要：
一 栈 ① 什么是栈：一种可以实现先进后出的数据结构。 栈类似于一个箱子，先放进去的书，最后才能取出来，同理，后放进去的书，先取出来 ② 栈的分类：静态栈和动态栈 静态栈： 静态栈的核心是数组，类似于一个连续内存的数组，我们只能操作其栈顶元素。 动态栈： 动态栈的核心是链表。 ③ 栈的算法： 栈的算 阅读全文
摘要：
一 数据结构： 常见的数据结构： 数据结构： 个体 + 个体的关系 数据结构和算法的定义： 1 、连续存储：数组、列表 ① 数组：申请一块连续的内存空间 优点：存取速度快。（因为连续的不需要再进行查找） 缺点：插入和删除效率低。（如果你从中间插入一个数据，那么这条数据之后的都要往后移，所以相应的效率 阅读全文
摘要：
Git merge是用来合并两个分支的。 git merge b # 将b分支合并到当前分支 同样 git rebase b，也是把 b分支合并到当前分支 git merge b # 将b分支合并到当前分支 同样 git rebase b，也是把 b分支合并到当前分支 原理 如下： 假设你现在基于远 阅读全文