摘要: 一、概述 requests 作者开发,集成 pyppeteer。 最近爬虫遇到的情况是,爬取的网站使用JavaScript渲染的,网站爬取的结果只有一堆JS代码。之前遇到这种情况的处理办法是用Splash(一般是配合Scrapy),或者Selenium来爬取,介绍一下常用的模拟浏览器执行,来爬去js 阅读全文
posted @ 2020-04-19 14:10 肖祥 阅读(439) 评论(0) 推荐(0) 编辑