摘要: 今天在爬去贴吧信息时,只出现部分网页代码,之后各种换工具,依旧是只能显示部分原代码. 结果如下: 但是,如果换成另一个user-agent,就是被注释掉的那个,就会有不一样的结果. 能够匹配到的结果超过400条,就不一一列举了,总之,百度贴吧可以屏蔽报头部分信息,所返回的网页源代码,大部分给注释掉了 阅读全文
posted @ 2018-05-06 22:51 六师兄丶 阅读(534) 评论(0) 推荐(0) 编辑
摘要: 为了能使用etree和美味的汤,楼主花费了超过4小时,换了2个浏览器,windows与linux之间不停切换,历经九九八十一难,终修成正果,能够使用这两个模块. 在使用之前,windows环境内必须有python解释器,我这里的版本是3.6.5 1.windows内配置python解释器的环境变量( 阅读全文
posted @ 2018-05-06 20:56 六师兄丶 阅读(450) 评论(0) 推荐(0) 编辑