01 2024 档案
摘要:写个函数,传入(书名:book,标题:tittle,内容:content),要求在book文件夹下(不存在则创建),创建每个tittle.txt文件,写入content内容 import os def save_to_file(folder_book, title, content): # 如果文件
阅读全文
摘要:requests模块 发送get请求,一般拥有2种方式 一种是直接拼凑URL,直接发送最终的URL,不需要传参逻辑 另一种是使用params传参逻辑,用最正统的get请求方式 1、直接发送get请求,不使用params传入参数 response = requests.get(url, headers
阅读全文
摘要:先搞单页网站: import requests from lxml import etree import re url = 'https://*********.com/top250?start=1' headers = { 'User-Agent': 'Mozilla/5.0 (Windows
阅读全文
摘要:使用xpath方式,打印结果,经常出现大量换行、空格等情况 示例如下: from lxml import etree # data = etree.parse('./素材/示例网站.html') parser = etree.HTMLParser(encoding="utf-8") # 出现读取错误
阅读全文
摘要:下载图片(单线程) import os.path import requests # 异步加载数据的接口 url = '************************************.com' headers = { 'User-Agent': '*********************
阅读全文
摘要:异步加载的特点 点击“查看更多”等按钮,浏览器“刷新”按钮无反馈效果。 查看浏览器点击F12的“DevTools”开发者工具,点选“网络”——“Fetch/XHR”——每点击一次“加载更多”就会出现一次网络请求 点击刷新出来的“请求内容”——点击“响应”,可以看到响应的是“字典” 点击标头,查看请求
阅读全文
摘要:网页同步加载的特点: 所见即所得:浏览器渲染后的展示字段,和“响应”页面中的“数据内容”、包括右键“查看源码”中完全一致。 同步请求的一般格式 import requests from lxml import etree # 同步加载的网站 url = '' headers = { 'User-Ag
阅读全文
摘要:这是标准的tr 、td格式 <table> <tr> <td>第一行第1列</td> <td>第一行第2列</td> <td>第一行第3列</td> </tr> <tr> <td>第二行第1列</td> <td>第二行第2列</td> <td>第二行第3列</td> </tr> <tr> <td>第
阅读全文
摘要:用with读取文件 # './素材/匹配天气.html'是文件路径,'r'表示读取模式,encoding='UTF-8'指定编码为UTF-8 with open('../素材/匹配天气.html', 'r', encoding='utf-8') as file: # 读取文件内容并将其保存在变量da
阅读全文