12 2021 档案
摘要：公司有个爬取的需求，要求持续性爬取，需要永久性地挂载到目标网站上，每天爬一次里面的数据。数据有下载表格的，我通过ui自动化点击拿到数据；还有一部分数据是几乎所有的图片信息，信息量近百万，这部分用scrapy。最后，决定什么时候爬取，爬取哪一天的，要通过请求来处理，所以需要搭建一个服务器，这个我用的f
阅读全文
摘要：一. node 下载 不要去node官网下载，那是最新版的，官方没提供旧版node。如果下载了最新版的还得下载一个管理node版本的工具，很麻烦且没必要。 在这个网站下载node：https://nodejs.org/download/release/v8.9.4/，10.23及以下都可以 安装 下
阅读全文
