selenium使用中driver.get(url)时遇到的问题

复制代码
        broswer = webdriver.Firefox()
        broswer.get("https://www.smzdm.com/p/20765776/#hfeeds")

                # self.logger.info(broswer.page_source)

        goods_scrapy_selector = Selector(text=broswer.page_source)

        title_selector = goods_scrapy_selector.css(".J_title")

        title = title_selector.get()

        self.logger.info(title)

        broswer.get("https://www.smzdm.com/p/20769796/#hfeeds")

        goods_scrapy_selector = Selector(text=broswer.page_source)

        title_selector = goods_scrapy_selector.css(".J_title")

        title = title_selector.get()
复制代码

不知道问什么,broswer只有在执行第一句的get时浏览器才会去加载页面,第二句不会去加载导致第二句的title是第一个地址的值。后来发现是url中#hfeeds这个锚的问题,去掉#feeds就好了,具体什么原因还不清楚。

posted @   zjhgx  阅读(6407)  评论(0编辑  收藏  举报
编辑推荐:
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
阅读排行:
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
· winform 绘制太阳,地球,月球 运作规律
· 【硬核科普】Trae如何「偷看」你的代码?零基础破解AI编程运行原理
· 上周热点回顾(3.3-3.9)
· 超详细:普通电脑也行Windows部署deepseek R1训练数据并当服务器共享给他人
点击右上角即可分享
微信分享提示