摘要:
一 .创建一个爬虫工程 scrapy startproject tongcheng #创建一只爬虫 scrapy genspider zufang 域名(xa.58.com/zufang/) 二.配置setting文件 ROBOTSTXT_OBEY = Ture 改为 Fales #打印日志的文件 阅读全文
摘要:
DHT是什么 DHT全称叫分布式哈希表(Distributed Hash Table),是一种分布式存储方法。在不需要服务器的情况下,每个客户端负责一个小范围的路由,并负责存储一小部分数据,从而实现整个DHT网络的寻址和存储。 各种博客已经有很多关于DHT介绍,这里就不详细列举了 加入DHT网络可以 阅读全文