Python爬虫实践 -- 记录我的第一只爬虫

一、环境配置

1. 下载安装 python3 .(或者安装 Anaconda)

 

2. 安装requests和lxml

进入到 pip 目录,CMD --> C:\Python\Scripts,输入命令:

  • pip install requests
  • pip install lxml

3. 安装自己喜欢的编辑器

我用的是 python 3.7 + PyCharm 2018版

 

二、轻松爬取百度网页。

(1)输入代码:

(2)输出结果:

 

(3)其实只需四行代码,我们就可以把百度首页的内容爬取下来:

  • 导入requests库 
  • 下载百度首页内容 
  • 更改编码方式 
  • 打印内容

 

posted @   牵只蜗牛去散步  阅读(300)  评论(0编辑  收藏  举报
编辑推荐:
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
阅读排行:
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· 阿里巴巴 QwQ-32B真的超越了 DeepSeek R-1吗?
· 【译】Visual Studio 中新的强大生产力特性
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 【设计模式】告别冗长if-else语句:使用策略模式优化代码结构
点击右上角即可分享
微信分享提示