摘要: Celery 是什么? Celery 是一个由 Python 编写的简单、灵活、可靠的用来处理大量信息的分布式系统,它同时提供操作和维护分布式系统所需的工具。 Celery 专注于实时任务处理,支持任务调度。 说白了,它是一个分布式队列的管理工具,我们可以用 Celery 提供的接口快速实现并管理一 阅读全文
posted @ 2019-01-14 16:34 BruceLong 阅读(270) 评论(0) 推荐(0) 编辑
摘要: 十种常见排序算法可以分为两大类: 非线性时间比较类排序:通过比较来决定元素间的相对次序,由于其时间复杂度不能突破O(nlogn),因此称为非线性时间比较类排序。 线性时间非比较类排序:不通过比较来决定元素间的相对次序,它可以突破基于比较排序的时间下界,以线性时间运行,因此称为线性时间非比较类排序。 阅读全文
posted @ 2019-01-14 14:48 BruceLong 阅读(1718) 评论(0) 推荐(0) 编辑
摘要: 介绍 redis是键值对的数据库,常用的五种数据类型为字符串类型(string),散列类型(hash),列表类型(list),集合类型(set),有序集合类型(zset) Redis用作缓存,主要两个用途:高性能,高并发,因为内存天然支持高并发 应用场景 分布式锁(string) setnx key 阅读全文
posted @ 2019-01-14 14:47 BruceLong 阅读(3897) 评论(0) 推荐(1) 编辑
摘要: 目录 前言 Items Pipelines 前言 Items Pipelines 前言 用Scrapy进行数据的保存进行一个常用的方法进行解析 Items item 是我们保存数据的容器,其类似于 python 中的字典。使用 item 的好处在于: Item 提供了额外保护机制来避免拼写错误导致的 阅读全文
posted @ 2019-01-14 13:50 BruceLong 阅读(935) 评论(0) 推荐(0) 编辑