摘要: 前言: 本次项目是使用scrapy框架,爬取豆瓣电影TOP250的相关信息。其中涉及到代理IP,随机UA代理,最后将得到的数据保存到mongoDB中。本次爬取的内容实则不难。主要是熟悉scrapy相关命令以及理解框架各部分的作用。 1、本次目标 爬取豆瓣电影TOP250的信息,将得到的数据保存到mo 阅读全文
posted @ 2018-12-18 23:23 我家有只大白兔 阅读(2795) 评论(0) 推荐(0) 编辑