哇塞,有好吃的~
摘要: 场景 昨天试了一下爬取根据网页查询参数的不同而变化的页面,今天来试试爬取单页面应用,url不发生变化,只是页面内的按钮点击导致数据的重新请求。 主要实现思路 利用Puppeteer可以模拟用户点击操作,等待接口返回等各种优秀的API,可以保证在数据结束后完成页面数据提取。 代码实现,以开源众包的页面 阅读全文
posted @ 2020-08-11 16:58 风行者夜色 阅读(794) 评论(0) 推荐(0) 编辑
摘要: 场景 很多长图大图需要裁剪成多张小图 用到的npm包 jimp,用于Node的图像处理库,完全使用JavaScript编写,零本地依赖项。 代码实现 const Jimp = require('jimp'); /** * url 目标图片,需要裁减的图片 * files 裁剪过后的文件路径,根据文件 阅读全文
posted @ 2020-08-11 11:07 风行者夜色 阅读(929) 评论(0) 推荐(0) 编辑