001-计算机网络目录
摘要：
计算机网络目录 一、知识结构 二、应用 其他补充 阅读全文
posted @ 2019-05-04 19:45 GuoZeping 阅读(561) 评论(0) 推荐(0) 编辑
002-运算符
摘要：
运算符 一、算数运算符 二、比较(关系)运算符 三、赋值运算符 四、逻辑运算符 五、位运算符 六、成员运算符 七、身份运算符 八、运算符优先级 阅读全文
posted @ 2019-04-30 23:42 GuoZeping 阅读(140) 评论(0) 推荐(0) 编辑
应用层-Http/Https
摘要：
应用层-Http/Https 一、Http 1. 1.1 2. 2.1 3.2 1. 1.1 2. 2.1 3.2 1. 1.1 2. 2.1 3.2 二、Https 1. 1.1 2. 2.1 3.2 1. 1.1 2. 2.1 3.2 1. 1.1 2. 2.1 3.2 1. 1.1 2. 2. 阅读全文
posted @ 2019-04-30 16:28 GuoZeping 阅读(249) 评论(0) 推荐(0) 编辑
Elasticsearch windows安装
摘要：
Elasticsearch windows安装 阅读全文
posted @ 2019-04-30 13:05 GuoZeping 阅读(330) 评论(0) 推荐(0) 编辑
Elasticsearch Linux安装
摘要：
Elasticsearch Linux安装 阅读全文
posted @ 2019-04-30 13:05 GuoZeping 阅读(196) 评论(0) 推荐(0) 编辑
Elasticsearch 目录
摘要：
Elasticsearch 目录 阅读全文
posted @ 2019-04-30 13:04 GuoZeping 阅读(253) 评论(0) 推荐(0) 编辑
Elasticsearch 简介
摘要：
Elasticsearch 简介 阅读全文
posted @ 2019-04-30 13:04 GuoZeping 阅读(254) 评论(0) 推荐(0) 编辑
分布式爬虫系统
摘要：
分布式爬虫系统 一、架构 二、原理 1.分布式原理： 利用scrapy-redis实现分布式，利用主从模式，把自己核心服务器称为master，用于跑爬虫程序的机器称为slave。我们知道，采用scrapy框架抓取网页，需要首先给定一些start_urls，爬虫首先访问start_urls里面的url 阅读全文
posted @ 2019-04-30 11:44 GuoZeping 阅读(1418) 评论(0) 推荐(0) 编辑
Scrapy 增量式爬虫
摘要：
Scrapy 增量式爬虫 https://blog.csdn.net/mygodit/article/details/83931009 https://blog.csdn.net/mygodit/article/details/83896412 https://blog.csdn.net/qq_39 阅读全文
posted @ 2019-04-30 11:09 GuoZeping 阅读(176) 评论(0) 推荐(0) 编辑
数据存储 twisted
摘要：
数据存储 twisted adbapi.ConnectionPool方法可以创建一个数据库连接池对象，其中包括多个连接对象，每个连接对象在独立的线程中工作。adbapi只是提供了异步访问数据库的编程框架，在其内部依然使mysql这样的库访问数据库。dbpool.runInteraction(inse 阅读全文
posted @ 2019-04-30 10:54 GuoZeping 阅读(147) 评论(0) 推荐(0) 编辑
数据存储 mongodb
摘要：
数据存储 mongodb 1 from pymongo import MongoClient 2 import os 3 base_dir = os.getcwd() 4 class MongoPipeline(object): 5 # 实现保存到mongo数据库的类， 6 collection = 阅读全文
posted @ 2019-04-30 10:51 GuoZeping 阅读(172) 评论(0) 推荐(0) 编辑