Request 爬虫的 SSL 连接问题深度解析
摘要：SSL 连接简介 SSL（Secure Sockets Layer）是一种用于确保网络通信安全性的加密协议，广泛应用于互联网上的数据传输。在数据爬取过程中，爬虫需要与使用 HTTPS 协议的网站进行通信，这就牵涉到了 SSL 连接。本文将深入研究 Request 爬虫中的 SSL 连接问题，并提供解
阅读全文
posted @
2023-11-22 16:43
小橙子11
阅读(161)
推荐(0) 编辑
Python爬虫过程中DNS解析错误解决策略
摘要：在Python爬虫开发中，经常会遇到DNS解析错误，这是一个常见且也令人头疼的问题。DNS解析错误可能会导致爬虫失败，但幸运的是，我们可以采取一些策略来处理这些错误，确保爬虫能够正常运行。本文将介绍什么是DNS解析错误，可能的原因，以及在爬取过程中遇到DNS解析错误时应该如何解决。 什么是DNS解析
阅读全文
posted @
2023-11-14 16:42
小橙子11
阅读(116)
推荐(0) 编辑
Scala中使用Selenium进行网页内容摘录的详解
摘要：前言公众号成为获取信息的重要途径之一。而对于公众号运营者来说，了解公众号的数据情况非常重要。比如，你可能想要获取公众号的文章内容，进行数据分析或者生成摘要。或者你可能想要监控竞争对手的公众号，了解他们的最新动态动态。无论是哪种情况，使用 Scala 和 Selenium 进行网页内容都是一个不错的选
阅读全文
posted @
2023-11-06 16:44
小橙子11
阅读(38)
推荐(0) 编辑
