wjx-2005-07-01  

2024年1月20日

摘要: 多线程和多进程爬虫 在很多场景中,爬虫需要抓取大量的数据,而且需要做大量的分析工作。如果只使用单线程的爬虫,效率会非常低。通常有实用价值的爬虫会使用多线程或多进程,这样可以很多工作同时完成,尤其在多CPU的机器上,执行效率更是惊人。 一、线程与进程 1、进程 计算机程序有静态和动态的区别。静态的计算 阅读全文
posted @ 2024-01-20 20:15 星辰与Python 阅读(3) 评论(0) 推荐(0) 编辑