python selenium
1、引入 from selenium import webdriver from selenium.webdriver import ActionChains # 滑动验证码 from selenium.webdriver.common.by import By #按照什么方式查找,By.ID,By.CSS_SELECTOR from selenium.webdriver.common.keys import Keys #键盘按键操作 enter from selenium.webdriver.support import expected_conditions as EC # 一般与wait一起用 from selenium.webdriver.support.wait import WebDriverWait #等待页面加载某些元素 from selenium.common.exceptions import TimeoutException, NoSuchElementException 引入 2、实例化browser browser=webdriver.Chrome() browser=webdriver.Firefox() browser=webdriver.PhantomJS() # browser=webdriver.Phantomjs(service_args=SREVICE_ARGS) # SREVICE_ARGS=[ ] 放在config文件 browser=webdriver.Safari() browser=webdriver.Edge() browser browser.get('https://www.baidu.com') 3、等待元素(可返回button) wait=WebDriverWait(browser,10) button1=wait.until(EC.presence_of_element_located((By.ID,'#content_left'))) #等到id为content_left的元素加载完毕,最多等10秒 button2=wait.until( EC.presence_of_element_located ( ( By.ID,'#content_left'),"食品" ) ) driver.implicitly_wait(3) #使用隐式等待 title_is 标题是某内容 title_contains 标题包含某内容 presence_of_element_located 元素加载出,传入定位元组,如(By.ID, 'p') visibility_of_element_located 元素可见,传入定位元组 visibility_of 可见,传入元素对象 presence_of_all_elements_located 所有元素加载出 text_to_be_present_in_element 某个元素文本包含某文字 text_to_be_present_in_element_value 某个元素值包含某文字 frame_to_be_available_and_switch_to_it frame加载并切换 invisibility_of_element_located 元素不可见 element_to_be_clickable 元素可点击 staleness_of 判断一个元素是否仍在DOM,可判断页面是否已经刷新 element_to_be_selected 元素可选择,传元素对象 element_located_to_be_selected 元素可选择,传入定位元组 element_selection_state_to_be 传入元素对象以及状态,相等返回True,否则返回False element_located_selection_state_to_be 传入定位元组以及状态,相等返回True,否则返回False alert_is_present 是否出现Alert 显式等待选项 4、browser.page_source # 页面代码,开始parse input_tag=browser.find_element_by_id('kw') # 1、find_element_by_id # 2、find_element_by_link_text # 3、find_element_by_partial_link_text # 4、find_element_by_tag_name # 5、find_element_by_class_name # 6、find_element_by_name # 7、find_element_by_css_selector # 8、find_element_by_xpath input_tag.send_keys('美女') # python2中输入中文错误,字符串前加个u input_tag.click() # 点击标签 input_tag.send_keys(Keys.ENTER) # 输入回车 tag.get_attribute('src') # 获取标签属性, 5、 browser.back() browser.forward() browser.close() 浏览器关闭、前进、后退 browser.current_url browser.get_cookies() browser.add_cookie({'k1':'xxx','k2':'yyy'}) tag_a.get_attribute('src') span_tag.text browser.execute_script('alert("hello world")') #打印警告,执行js browser.switch_to.frame('iframeResult') #切换到id为iframeResult的frame browser.switch_to.parent_frame() #切回父frame,就可以查找到了 print(browser.window_handles) #获取所有的选项卡 browser.switch_to_window(browser.window_handles[1]) 6、页面截图 from selenium import webdriver from time import sleep driver = webdriver.Firefox() driver.get("http://www.baidu.com") driver.find_element_by_id('kw').send_keys('selenium') driver.find_element_by_id('su').click() sleep(2) #截取当前窗口,指定截图图片的保存位置 driver.get_screenshot_as_file(r"C:\Users\fyr\Desktop\123.jpg") driver.quit() 7、选项卡 #选项卡管理:切换选项卡,有js的方式windows.open,有windows快捷键:ctrl+t等,最通用的就是js的方式 import time from selenium import webdriver browser=webdriver.Chrome() browser.get('https://www.baidu.com') browser.execute_script('window.open()') print(browser.window_handles) #获取所有的选项卡 browser.switch_to_window(browser.window_handles[1]) browser.get('https://www.taobao.com') time.sleep(10) browser.switch_to_window(browser.window_handles[0]) browser.get('https://www.sina.com.cn') browser.close()