selenium
selenium模块使用
selenium模块和爬虫之间具有怎样的关联
--便捷的获取网站中动态加载的数据
--便捷实现模拟登录
什么是selenium模块
--基于浏览器自动化的一个模块
selenium使用流程:
--环境安装: pip install selenium
--下载一个浏览器的驱动程序
--下载路径:
--驱动程序和浏览器的映射关系
把解压的浏览器驱动放在python解析器所在的文件夹
--实例化一个浏览器对象
--编写基于浏览器自动化的操作代码
发起请求:get( url )
标签定位:find系列方法
标签交互:send_keys( 'xxx' )
执行js程序:excute_script( 'jsCode' )
前进、后退:back( ) forward( )
关闭浏览器:quit( )
from selenium.webdriver import Firefox
1、创建浏览器对象
web = Firefox( )
2、打开一个网址
web.get('http://www.baidu.com')
3、找到某个元素,点击它
ele = web.find_element_by_xpath('/html/body/div[10]/div[1]/div[2]/div[2]/div[1]/div/ul/li[4]/a')
ele.click()
4、找到输入框,输入python
web.find_element_by_xpath('//*[@id="search_input"]').send_keys('python',Keys.ENTER)
python控制360浏览器
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
import warnings
warnings.filterwarnings("ignore")
chrome_options = webdriver.ChromeOptions()
chrome_options.binary_location = r"C:\Users\Administrator\AppData\Local\360ChromeX\Chrome\Application\360ChromeX.exe"
chrome_options.add_argument(r'--lang=zh-CN')
web = webdriver.Chrome(chrome_options=chrome_options)
web.get('http://lagou.com')