2018 年 5月 9 日随笔档案 - 温良Miner

2018年5月9日

摘要：使用scrapy抓取目标url下所有的课程名和价格，并将数据保存为json格式url=http://www.tanzhouedu.com/mall/course/initAllCourse 观察网页并分析该网页：是一个ajax加载的页面，每次数据变化，但是url不变化，通过查看headers中的信阅读全文

posted @ 2018-05-09 10:12 温良Miner 阅读(2605) 评论(0) 推荐(0) 编辑

scrapy框架介绍及安装

摘要：什么是scrapy框架？ scrapy框架的安装 1.windowes下的安装 Python 2 / 3升级pip版本：通过pip 安装 Scrapy 框架 2.Ubuntu下的安装 Ubuntu 需要9.10或以上版本安装方式Python 2 / 3安装非Python的依赖通过pip 安装 S 阅读全文

posted @ 2018-05-09 08:40 温良Miner 阅读(430) 评论(0) 推荐(0) 编辑