2017年9月5日

redis面试总结

摘要: http://blog.csdn.net/guchuanyun111/article/category/6335900 (1)什么是redis? Redis 是一个基于内存的高性能key-value数据库。 (有空再补充,有理解错误或不足欢迎指正) (2)Reids的特点 Redis本质上是一个Ke 阅读全文

posted @ 2017-09-05 19:34 bigdata_devops 阅读(250) 评论(0) 推荐(0) 编辑

scrapy-redis使用以及剖析

摘要: scrapy-redis是一个基于redis的scrapy组件,通过它可以快速实现简单分布式爬虫程序,该组件本质上提供了三大功能: scheduler - 调度器 dupefilter - URL去重规则(被调度器使用) pipeline - 数据持久化 scrapy-redis组件 1. URL去 阅读全文

posted @ 2017-09-05 16:31 bigdata_devops 阅读(273) 评论(0) 推荐(0) 编辑

导航