防止 Selenium 被检测出来,解决方法
import time from selenium.webdriver import Chrome from selenium.webdriver.chrome.options import Options chrome_options = Options() chrome_options.add_argument("--headless")
chrome_options.add_argument("--disable-blink-features=AutomationControlled") chrome_options.add_argument('user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36') driver = Chrome('C:\Program Files\Google\Chrome\Application\chromedriver.exe', options=chrome_options) """目前网上的反检测方法几乎都是掩耳盗铃,因为模拟浏览器有几十个特征可以被检测,仅仅隐藏 webdriver 这一个值是没有任何意义的。""" # Selenium在打开任何页面之前,先运行这个Js文件。 with open('C:\Program Files\stealth.min.js') as f: js = f.read() driver.execute_cdp_cmd("Page.addScriptToEvaluateOnNewDocument", { "source": js }) driver.get('https://bot.sannysoft.com/') time.sleep(2) # driver.save_screenshot('walkaround.png') """只要driver不断开,是一直可以用的""" # 你可以保存源代码为 html 再双击打开,查看完整结果 source = driver.page_source with open('result.html', 'w') as f: f.write(source)
Chrome 88版本,stealth.min.js
文件,已经无法正确隐藏window.navigator.webdriver,解决办法:
在使用 Selenium 调用 Chrome 的时候,只需要增加一个配置参数:chrome_options.add_argument("--disable-blink-features=AutomationControlled")
就可以再次隐藏window.navigator.webdriver
了。
注:stealth.min.js这个文件网上有 自行百度下载
分类:
selenium
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源!
· 周边上新:园子的第一款马克杯温暖上架