随笔分类 - python
摘要:一、选取节点常用的路径表达式: 表达式 描述 实例 nodename 选取nodename节点的所有子节点 xpath(‘//div’) 选取了div节点的所有子节点 / 从根节点选取 xpath(‘/div’) 从根节点上选取div节点 // 选取所有的当前节点,不考虑他们的位置 xpath(‘/
阅读全文
摘要:标准选择器 可根据标签名、属性、内容查找文档 注意这里class 为python 的关键字 需要加入下划线_ find_all( name , attrs , recursive , text , **kwargs ) name html=''' <div class="panel"> <div c
阅读全文
摘要:抓取天气 import requests from bs4 import BeautifulSoup # from pyecharts import Bar cities_temp = [] # 处理抓取页面 def parse_url(url): headers = {"User-Agent":
阅读全文
摘要:案例 import requests import os from requests.packages import urllib3 from pyquery import PyQuery as pq import re # 解析数据 import ssl os.chdir(r"E:/pics222
阅读全文
摘要:案例 from selenium import webdriver from selenium.webdriver.common.keys import Keys # 键盘按键操作 import time def get_goods(driver): try: goods = driver.find
阅读全文
摘要:案例 import os from hashlib import md5 from selenium import webdriver import requests from lxml import etree # 首页请求 def get_response(url): headers = {"u
阅读全文