摘要: settings.py 项目地址:https://github.com/CH-chen/jdbook 阅读全文
posted @ 2019-02-12 14:31 CHVV 阅读(477) 评论(0) 推荐(0) 编辑
摘要: # -*- coding: utf-8 -*- import scrapy from scrapy.http.cookies import CookieJar from scrapy.http import Request class ChoutiSpider(scrapy.Spider): name = 'chouti' allowed_domains = ['chouti.c... 阅读全文
posted @ 2019-02-09 11:49 CHVV 阅读(194) 评论(0) 推荐(0) 编辑
摘要: settings 项目地址:https://github.com/CH-chen/renrencookie 阅读全文
posted @ 2019-01-29 06:28 CHVV 阅读(168) 评论(0) 推荐(0) 编辑
摘要: pipelines.py settings 项目地址:https://github.com/CH-chen/suningbook 阅读全文
posted @ 2019-01-29 06:24 CHVV 阅读(218) 评论(0) 推荐(0) 编辑
摘要: pipelines.py settings 项目地址:https://github.com/CH-chen/sun0769 阅读全文
posted @ 2019-01-29 06:16 CHVV 阅读(224) 评论(0) 推荐(0) 编辑
摘要: pipelines.py items,py settings.py 项目地址:https://github.com/CH-chen/tencent 阅读全文
posted @ 2019-01-29 06:06 CHVV 阅读(219) 评论(0) 推荐(0) 编辑
摘要: pipelines.py settings.py 注意点 阅读全文
posted @ 2019-01-29 05:57 CHVV 阅读(207) 评论(0) 推荐(0) 编辑
摘要: pipelines.py settings.py 阅读全文
posted @ 2019-01-29 05:49 CHVV 阅读(212) 评论(0) 推荐(0) 编辑
摘要: scrapy 命令: scrapy startproject xx(爬虫目录) 创建爬虫目录 cd xx 进入目录 scrapy genspilder chouti(爬虫名称) chouti.com(起始url) 然后编写 启动爬虫项目: scrapy crawl chouti(爬虫名称) --nolog(不看默认日志) # n... 阅读全文
posted @ 2019-01-29 05:42 CHVV 阅读(163) 评论(0) 推荐(0) 编辑
摘要: FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制, 充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 FastDFS 架构包括 Tracker s 阅读全文
posted @ 2019-01-22 00:17 CHVV 阅读(725) 评论(0) 推荐(0) 编辑