随笔 - 172  文章 - 52  评论 - 6  阅读 - 17万

selenium登录12306,requests抓取数据

  selenium登录12306,requests抓取数据:

复制代码
import selenium
import selenium.webdriver
import selenium.webdriver.common.keys
from  selenium.webdriver.common.action_chains import ActionChains
import requests
import lxml
import lxml.etree
import time
#登录12306需要点击验证码  ,会话前时间长一点
driver = selenium.webdriver.Firefox()
driver.get("https://kyfw.12306.cn/otn/resources/login.html")
time.sleep(3)
#切换到账户登录
elem=driver.find_element_by_xpath("/html/body/div[2]/div[2]/ul/li[2]/a") #点到账户登录
time.sleep(3)
elem.click()   #点击一下

user=driver.find_element_by_id("J-userName")
time.sleep(2)
password=driver.find_element_by_id("J-password")
#login=driver.find_element_by_id("J-login")
user.clear()  #清理user  因为已经有了,再写会出现问题
password.clear()#清理user  password
time.sleep(2)
user.send_keys("用户名")
time.sleep(2)
password.send_keys("密码")
time.sleep(15)   #手动点击验证码
#btn=driver.find_element_by_class_name("btn btn-primary ok").click() #点击确定
#login.click()  #点击一下  登录
time.sleep(30)  # 等待页面加载  时间太短cookie会加载不出来

print("开始会话")
req=requests.session()  #会话   打开一个网页,直到关闭浏览器之前 都是会话
cookies=driver.get_cookies()  #抓取全部的cookie
for cookie in cookies:   #把cookie加载到自定义的网页中
    req.cookies.set(cookie['name'],cookie['value'])   #把cookie加载到req中
req.headers.clear()  #清空头
newpage=req.get("https://kyfw.12306.cn/otn/view/information.html",verify=False)  #个人信息网址
time.sleep(5)
#btn=driver.find_element_by_class_name("btn btn-primary ok").click() #点击确定
print("会话完成")
time.sleep(5)
print(newpage.text)  #页面

time.sleep(20)
复制代码

 

posted on   共感的艺术  阅读(314)  评论(0编辑  收藏  举报
编辑推荐:
· AI与.NET技术实操系列(二):开始使用ML.NET
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
阅读排行:
· DeepSeek 开源周回顾「GitHub 热点速览」
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布:重大改进与新特性概览!
· AI与.NET技术实操系列(二):开始使用ML.NET
· 单线程的Redis速度为什么快?
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

点击右上角即可分享
微信分享提示