摘要：
爬虫分类 通用 聚焦 增量式 2.什么事UA检测,如何破解? 服务器通过获取请求,获取请求头中的UA,判断UA的值,请求的载体身份标识 给个伪headers 3.简述https的加密流程 4.什么是动态加载数据？如何爬取动态加载的数据？ 有的网站 部分数据使用ajax生成动态数据,所见非所得,使用抓 阅读全文
摘要：
celery 一般用于做异步 和定时任务 不过听网上说 celery 坑还是蛮多的，特别定时任务，我们一般用来做定时任务，还有数据导入导出。celery 不支持 redis cluster 集群模式uWSGI 自带了一个简单的 Spooler 可以处理大部分异步任务和周期运行的任务（ 2min 以内 阅读全文
摘要：
es是什么? es是基于Apache Lucene的开源分布式（全文）搜索引擎，，提供简单的RESTful API来隐藏Lucene的复杂性。 1.分布式的实时存储,每个字段都被索引可被搜索 2.分布式实时分析搜索引擎 3.可以扩展到成千台服务器,处理pb级结构化或非结构化数据 es下载和安装 ja 阅读全文
摘要：
1.安装ansible eple源 2.安装ansible 常用帮助 3.andible.cfg配置参数 Ansible有很多配置参数，以下是几个默认的配置参数： 4.设置互信任配置 略 5.inventory 用于定义ansible要管理的主机 6.ansible 常用模块总结 command和s 阅读全文
摘要：
注意：你问答案在哪里？答案在视频里了，就是不给你写。 第一部分 Python基础篇（80题） 为什么学习Python？ 通过什么途径学习的Python？ Python和Java、PHP、C、C#、C++等其他语言的对比？ 简述解释型和编译型编程语言？ Python解释器种类以及特点？ 位和字节的关系 阅读全文
摘要：
工作区：当前编辑的区域 缓存区：add 之后的区域 本地仓库：commit之后的区域 远程仓库：远程的区域 基本操作 快照功能 也就一个人开发的时候 有用 多人开发 慎用 新电脑环境 分支操作 修复bug流程 一般 公司 一个人 一个分支 外加有 review的分支 协程开发小例子 两个面试题 gi 阅读全文
摘要：
http://www.mongodb.org.cn/manual/aggregation-group/ 1.启动 mongod - 改变data/db位置： --dbpath D:\data\db mongod --install 安装windows系统服务 mongod --remove 卸载wi 阅读全文
摘要：
HTML5 Plus应用概述 首先新建一个移动App项目，文件-->新建-->移动APP HTML5 Plus移动App，简称5+App，是一种基于HTML、JS、CSS编写的运行于手机端的App，这种App可以通过扩展的JS API任意调用手机的原生能力，实现与原生App同样强大的功能和性能。 代 阅读全文
摘要：
目前的人工智能做了什么? 语音识别:小米的小爱同学,苹果的siri,微软的Cortana语音合成:小米的小爱同学,苹果的siri,微软的Cortana图像识别:交通摄像头拍违章,刷脸解锁手机等视频识别:抖音内容审核,视频社交APP的审核机制文字识别:从身份证照片提取身份证号码,扫一扫翻译语义理解:智 阅读全文
摘要：
WebSocket 是一种网络通信协议。RFC6455 定义了它的通信标准。 HTTP 协议是一种无状态的、无连接的、单向的应用层协议。它采用了请求/响应模型。通信请求只能由客户端发起，服务端对请求做出应答处理。 这种通信模型有一个弊端：HTTP 协议无法实现服务器主动向客户端发起消息。 WebSo 阅读全文