2018年12月23日
推荐多线程下载工具axel替代wget
摘要： 在爬数据的时候很多时候需要下载文件比如压缩文件,音频,视频,图片等等,这些文件通常有一个请求的url,这个时候使用request模块或者urllib模块都很慢,而且很不稳定,这个时候使用wget或者axel等系统工具并结合os模块的system命令就很稳定并且很快 在数据抓取的时候很能加快速度 亲测 阅读全文
posted @ 2018-12-23 21:35 wybert 阅读(556) 评论(0) 推荐(0) 编辑