爬虫入门到入狱

爬虫入门到入狱

1. 爬虫介绍及requests模块

2. bs4解析html与xml、代理池、验证码破解

3. css选择器与xpath选择器与selenium测试工具

4. scrapy架构、目录结构与配置文件、持久化、动作链

5. scrapy请求传参、提高爬取效率、中间件、user-agent池、分布式爬虫