2019年9月22日
scrapy爬虫框架爬取招聘网站
摘要： 目录结构 BossFace.py文件中代码： 将这些开启，建立延迟，防止服务器封掉ip 在命令行创建的命令依次是： 1.scrapy startproject bossFace 2.scrapy genspider BossFace www.zhipin.com #进入spider中执行 3.scr 阅读全文
posted @ 2019-09-22 21:19 King~~~ 阅读(617) 评论(0) 推荐(0) 编辑
多线程爬取招聘网站
摘要： 爬虫14天小练手这是数据截图： 只需要找到网站中传输的json数据流就可以获取该网站的数据，所以打开谷歌浏览器，耐心查看网络传输的包即可。例如： 如果没有刷新一下网页，即可出现传输的数据流。 接下来我们就可以完成上头所要的数据了。 阅读全文
posted @ 2019-09-22 21:02 King~~~ 阅读(356) 评论(0) 推荐(0) 编辑