傻傻de

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2018年12月10日

摘要: 昨天写了一个小爬虫,爬取了豆瓣上2017年中国大陆的电影信息,网址为 "豆瓣选影视" ,爬取了电影的名称、导演、编剧、主演、类型、上映时间、片长、评分和链接,并保存到MongoDB中。 一开始用的本机的IP地址,没用代理IP,请求了十几个网页之后就收不到数据了,报HTTP错误302,然后用浏览器打开 阅读全文
posted @ 2018-12-10 13:00 傻傻de 阅读(2989) 评论(0) 推荐(0) 编辑