01 2024 档案
摘要：【转载】淘宝爬虫sign、token详解 淘宝对于h5的访问采用了和客户端不同的方式，由于在h5的js代码中保存appsercret具有较高的风险，mtop采用了随机分配令牌的方式，为每个访问端分配一个token，保存在用户的cookie中，通过cookie带回服务端分配的token, 客户端利用分
阅读全文
摘要：淘宝的反爬非常厉害，即使模拟了浏览器，仍然会有一大堆验证流程，首先声明这里只是实现了可用的代码，并不实用。 下面是一段示例代码，用于模拟爬取淘宝特定关键词下，按销量排序，商品的价格、店名等数据： 在开始之前，要下载谷歌浏览器和对应的webdriver，Python、以及Python安装seleniu
阅读全文
摘要：因为浏览器指纹暴露了身份 可以通过下面这个网址检测，如果是selenium打开的，就会显示红色 Antibot (sannysoft.com) 可以用selenium调试手动打开的浏览器来伪装： 首先确保没有其他Chrome进程在运行。 然后，用命令行加参数打开浏览器： start chrome.e
阅读全文
摘要：https://googlechromelabs.github.io/chrome-for-testing/ 只需要用谷歌浏览器打开就行，里面有对应webdriver的链接，包括114以上版本的
阅读全文
