摘要:
在远程服务器上,如果不配置 proxy,可能下载扩展很慢,甚至 copilot 无法用。 设置中搜索 proxy: 注意这个代理是全局的,意味着所有应用都会走这个代理,jupyter 里面连接远程服务器时,也会走这个代理。 所以如果 jupyter 服务启动在内网,而这个代理没有把内网流量代理回内网 阅读全文
摘要:
背景: 最近在爬某网站,发现其反爬机制是这样的: 如果一段时间访问次数比较多,就会禁止访问几分钟,然后恢复正常。 对于爬虫端,这其实很难针对写: 发生禁止访问时,爬虫并不知道这是突发性错误(临时网络挂了,过几秒可能就好了),还是资源本身不能访问(永远会 fail),还是网站反爬机制起作用了。 如果能 阅读全文