摘要:
【Python3网络爬虫】2 Requests库的使用 介绍 对了解爬虫的一些基本理念,掌握爬虫爬取的流程后,我们需要学习一些更加高级的工具和内容来方便我们的爬取,本节主要介绍requests库的基本用法 安装 基本请求 自定义请求头,超时,代理 阅读全文
摘要:
【Python3网络爬虫】1 urllib库的使用 内置模块介绍 Python内置的HTTP请求库,包含四个模块 异常处理模块,如果出现请求错误,我们可以捕获这些异常,然后进行重试或其他操作以保证程序不会意外终止。 一个工具模块,提供了许多URL处理方法,比如拆分、解析、合并等。 它是最基本的HTT 阅读全文