摘要：
要网站的，私信我（不玩套路那种） 分析 首先打开这个网站，看到由cloudflare，心里戈登一下，不慌，接着看 找到接口，查看返回数据 拿到数据接口单独请求会出现如下： 发现果然有cloundflare检测 用火狐浏览器打开 然后用重放请求功能看看，正常请求 而且能正常拿数据 那我用postman测试 阅读全文
摘要：
在爬取某网站时，我们习惯于直接在浏览器里复制headers和请求参数，粘贴到自己的代码里进行调试
但是，在爬取linkg网站时，发现了一个问题：
解码失败
运行： 阅读全文
摘要：
要网址私信（博客园私信即可，不用加微信、关注公众号、转发朋友圈、朋友圈集赞满等等的无聊操作，没有那些套路哈）。
分析
这次也是一个国外的代理网站，打开查看：
是的，它也是对端口做了加密，这里的rf034其实就是实际的端口，但是并没有直接显示出来，而是通过一段js实现的
那么这段js在哪呢？直接全文检索： 阅读全文
摘要：
前言
其实有关AES，之前发过一版的博客文章，python爬虫- js逆向解密之破解AES(CryptoJS)加密的反爬机制
而这次虽然也是AES，但是这次的变化有点大了。
这次的目标对象同样也是我的老朋友给我的，还是老规矩，地址我不会给出来的
打开网址，界面如下：
不要问我为什么码了这么多，主要涉及到了手机号哈，马赛克必须马死 阅读全文
摘要：
今天偶然看到个国外的代理网站（具体哪个保密），它的端口是做了映射的，虽然不难，但是看起来很有意思
浏览器打开是这样：
网站源码是这样： 阅读全文
摘要：
言
我朋友给了我一个网站，说他们内部测试用的，要我看下有没有办法爬数据，也就是他们的搜索接口能搞不，这已经是我做反爬开始的第n个爬虫等级测试了
分析
习以为常的打开网站，然后就看到下面的界面： 阅读全文
摘要：
在测试某api时，偶然的发现一个很奇怪的现象
如下：
报的啥错呢：
requests.exceptions.ProxyError: HTTPSConnectionPool(host='www.xxxx.com', port=443): Max retries exceeded with url: / (Caused by ProxyError('Cannot connect to proxy.', timeout('_ssl.c:1108: The handshake operation timed out')))
根据我的经验，看到后面的Max retries exceeded with..... 之类的我都大概知道啥原因，就是请求重试量太多了，可是此时此刻我就一段同步代码啊，后面没内容了，而且也只请求了一次，headers里的Connection也是close而非keep-alive，verfiy也设置的false，
这咋回事呢 阅读全文
摘要：
到底哪个更好用呢，看你个人吧，我觉得poetry更好一点咯，不过还是看个人喜好了
一：conda创建虚拟环境
1.安装conda
这个就省略了，网上太多教程了
2.创建虚拟环境： 阅读全文
摘要：
@babel/parse
解析函数
babelParser.parse(code, [options])
将提供的代码作为一个完整的ECMAScript程序进行解析 阅读全文
摘要：
不多说，直接看，能背下来最好，别问那么多，看就完了，后续很多的操作都依附于这些
@babel/parser：将js源码转为AST对象
@babel/traverse：对AST对象遍历
@babel/types：对AST节点操作，修改，删除等
@babel/generator：将AST对象转为js代码
通常的流程就是：
将混淆的js用parser转为AST，traverse和types对AST处理转译，generator将转译处理好的AST转为js代码，最后的这个js代码就是可读性很强的那种，后续的逆向就可以操作了 阅读全文