Python爬虫selenium、PhanmJs
selenium:可以模拟鼠标进行一些操作
实例1:实现自动打开google浏览器,进行百度搜索,并关闭浏览器
from selenium import webdriver from time import sleep
#指定安装google浏览器驱动程序 bro = webdriver.Chrome(r'E:\Spider爬虫视频\day03\chromedriver_win32\chromedriver.exe') #打开浏览器发起请求 bro.get('https://www.baidu.com') sleep(2) #定位到搜索框 my_text = bro.find_element_by_id('kw') #向搜索框中输入一个关键字 my_text.send_keys('西红柿首富') sleep(5) #定位到搜索按钮 my_button = bro.find_element_by_id('su') my_button.click() sleep(6) #关闭浏览器 bro.quit()
PhanmJs:无界面浏览器
from selenium import webdriver from time import sleep #指定phantomjs驱动 bro = webdriver.PhantomJS(r'E:\Spider爬虫视频\day03\phantomjs-2.1.1-windows\bin\phantomjs.exe') #打开浏览器发起请求 bro.get('https://www.baidu.com') bro.save_screenshot('./首页.png')#用来截屏 sleep(2) #定位到搜索框 my_text = bro.find_element_by_id('kw') #向搜索框中输入一个关键字 my_text.send_keys('人民币') bro.save_screenshot('./2.png') sleep(2) #定位到搜索按钮 my_button = bro.find_element_by_id('su') my_button.click() sleep(5) bro.save_screenshot('./3.png') #关闭浏览器 bro.quit()