未知的路上

摘要： 一、缘由。 抓取数据时，有一些网站 设置了一些反爬虫设置，进而将自己本地 IP 地址拉入系统黑名单。从而达到禁止本地 IP 访问数据的请求。 二、思路。 根据其他 代理 IP 网站，进行一个免费的代理 IP 进行搜集，然后进行统一 验证 管理 如下图： 三、抓取包含代理 IP 的网站页面。 抓取来网 阅读全文