2022年8月1日
python 做爬虫真的很慢吗？（协程并发测试 ）
摘要： 总有人说python做爬虫速度慢，能开并发数少，至于为什么慢就是说不上来，今天就是测试一下python语言的速度和并发数量。 在网络爬虫中，影响速度的有数据下载，数据解析，数据存储，最主要的影响是数据下载和数据存储，数据下载影响是网络IO，数据存储是磁盘IO，本次模拟数据下载是1s，然后数据存储直接 阅读全文
posted @ 2022-08-01 18:15 淋哥 阅读(786) 评论(0) 推荐(0) 编辑