摘要: 方案1:一次性爬取全部淘宝美食信息 1. spider.py文件如下 2. config.py 方案2:上面这种方法经测试可正常运行,但是会一次性爬取全部数据,数据量较大且不能灵活控制抓取内容,下面代码基本实现方法如下 1. 把搜索的关键字直接放在url中 2. 分页抓取商品信息 3. 使用chro 阅读全文
posted @ 2018-07-09 09:21 坚强的小蚂蚁 阅读(918) 评论(0) 推荐(0) 编辑