Fork me on GitHub
摘要: 20230103 做多线程爬虫,需要有些对抗反扒机制的措施. 有些时候直接写多线程,比如python的multiprocessing,会发现抓不下来东西.这也可能是我的爬虫没写好.但是就是发现同样的代码,不使用多线程就可以抓下来.使用多线程就啥也抓不下来. 这次写爬虫发现了一个取巧的办法,就是反扒机 阅读全文
posted @ 2023-01-04 22:18 Mo槑 阅读(18) 评论(0) 推荐(0) 编辑