摘要:
一.phantomjs的简单使用 二.谷歌无头浏览器的简单使用 三.通过selenium和phtantosJs配合抓取到更多数据(ajax) selenium+phantomjs 就是爬虫终极解决方案:有些网站上的内容信息是通过动态加载js形成的,所以使用普通爬虫程序无法回去动态加载的js内容。 例 阅读全文
摘要:
一.seleniu的简单使用 1.简单使用 Selenium支持非常多的浏览器,如Chrome、Firefox、Edge等,还有Android、BlackBerry等手机端的浏览器。另外,也支持无界面浏览器PhantomJS。 2.元素定位 webdriver 提供了一系列的元素定位方法,常用的有以 阅读全文
摘要:
一.代理皮的简单使用 二.多进程爬取 阅读全文