python:爬虫面试(一)
摘要:
跟大家分享一下面试中关于爬虫方面相关的问题。 ——————————基础知识—————————— 什么是爬虫? 请求网站并提取数据的自动化程序 爬虫基本流程? 遇到过什么反爬虫措施,如何解决? 1. 基于用户行为,同一个ip段时间多次访问同一页面 利用代理ip,构建ip池 2. 请求头里的user-a 阅读全文
posted @ 2017-03-12 17:51 WalkersChao 阅读(245) 评论(0) 推荐(0) 编辑