puppeteer 的PDD反爬经历
摘要：使用puppeteer 爬取PDD数据时出现要求登录，以前是没有这问题的。 尝试多种方式如果： 变更UA 变更代理IP 变更Chromium版本（当然最终就是该问题的原因，但是因为版本跨度太大没有测试出来） 最后查找浏览器判断是否在自动化工具控制下的方法，结果查询到文章，得知了新版Chrome有na
阅读全文
posted @ 2018-09-28 16:40
09 2018 档案
Elasticsearch 笔记
摘要：Elasticsearch 版本 6.2.4 1. 当对某一type，关闭动态mapping（设为false，非strict）时，插入新的字段是否会存储呢？能否搜索呢？能否排序呢？ 创建索引： 查看mapping： 得到结果： 插入数据： 查看是否存入： 得到结果： 可以得知是会存储的。 查看是否可
阅读全文
posted @ 2018-09-09 17:13
