摘要：
代码 找一个可以用的ip然后加入代理 用代理ip去访问 import requests # 114.255.132.60:3128 proxies ={ "https":"http://114.255.132.60:3128" } response = requests.get("http://ww 阅读全文
摘要：
这个爬虫做了很久 有几个问题 1.防盗链的问题：如下图所示Referer 这个就是回溯上一个网页 如果上一个网页不是Referer就会报错 这个就是我没有从那个网页访问的结果 2.在我自己爬取的时候不知道mrd是什么东西 以为跟countId一样是一个标识的东西 结果这只是一个随机的数 代码 # 防 阅读全文
摘要：
# 登录 -> 得到cookie # 带着cookie去访问 -> 得到数据 # 必须得把上面两个操作连起来 # 我们可以使用session进行请求 -> session 你可以认为是一连串的请求，在这个过程中的cookie不会丢失 说一说过程中遇到的问题： 刚开始我按着视频做的时候他没有heade 阅读全文
摘要：
架构漫谈： 首先是什么是架构，读完之后我自己的对架构的理解就是一种为了方便人们解决问题的一种方案，具体是怎么方便解决问题的呢? 总结下来：先对问题进行分析，再对问题进行切分，由不同的人进行不同的工作，然后使这些部分有机的结合为一个整体，这就是架构，是一个方便解决问题的过程。 接下来，我们谈为什么会产 阅读全文