摘要： 网站地址:http://www.17500.cn/p5/all.php 1、新建爬虫项目 2、在spiders目录下新建爬虫 3、在爬虫文件中修改入口url 4、添加爬取条目 5、编写爬虫，通过xpath解析网站 6、在配置文件中忽略robots.txt文件(仅学习用) 7、在配置文件中打开User 阅读全文