摘要： 最近没什么重要的任务，就抽空看了看项目组爬虫小组的代码，因为我们的爬虫主要是以python的scrapy框架为主，看起来比较方便。在看代码的时候看到一个叫phantomjs的东西，蛮新鲜的，就去问了下爬虫开发，这货是干嘛用的？开发告诉我这个东西是一个js引擎，我们在抓取ajax页面的时候用的，你们QA不是一直用selenium对付那些js渲染的东西么，可以去试试这个，不需要用浏览器的。于是，回去查了一下phantomjs这个东西，学习了下，感觉还是蛮容易上手的。 Phantomjs是一个轻量的浏览器引擎，官网介绍中提到，它主要用在这几个场合：官网地址:http://phantomjs.o... 阅读全文