高薪程序员

摘要： 个人本地开发测试环境亲身经历,线上环境不存在跨域问题,nginx转发 解决思路: 1.什么是跨域 在浏览器窗口中，和某个服务端通过某个 “协议+域名+端口号” 建立了会话的前提下，去使用与这三个属性任意一个不同的源提交了请求，那么浏览器就认为你是跨域了违反了浏览器的同源策略 2.如何解决:3种方法 阅读全文

摘要： django实现websocket大致上有两种方式，一种channels，一种是dwebsocket。channels依赖于redis，twisted等，相比之下使用dwebsocket要更为方便一些。 安装： pip install dwebsocket 配置： 简单使用： 模拟文件下载的简单示例 阅读全文

摘要： 1.MySQl主从复制 原理 ：将主服务器的binlog日志复制到从服务器上执行一遍，达到主从数据的一致状态。 过程 ：从库开启一个I/O线程，向主库请求Binlog日志。主节点开启一个binlog dump线程，检查自己的二进制日志，并发送给从节点；从库将接收到的数据保存到中继日志（Relay l 阅读全文

摘要： 一、Http和Https的基本概念 Http：超文本传输协议（Http，HyperText Transfer Protocol)是互联网上应用最为广泛的一种网络协议。设计Http最初的目的是为了提供一种发布和接收HTML页面的方法。它可以使浏览器更加高效。Http协议是以明文方式发送信息的，如果黑客 阅读全文

摘要： 在TCP层，有个FLAGS字段，这个字段有以下几个标识：SYN, FIN, ACK, PSH, RST, URG. 其中，对于我们日常的分析有用的就是前面的五个字段。 它们的含义是： SYN表示建立连接， FIN表示关闭连接， ACK表示响应， PSH表示有 DATA数据传输， RST表示连接重置。 阅读全文

摘要： 1.、导引 如何进行电影分类 众所周知，电影可以按照题材分类，然而题材本身是如何定义的?由谁来判定某部电影属于哪 个题材?也就是说同一题材的电影具有哪些公共特征?这些都是在进行电影分类时必须要考虑的问 题。没有哪个电影人会说自己制作的电影和以前的某部电影类似，但我们确实知道每部电影在风格 上的确有可 阅读全文

摘要： 1.matplotlib 静态图形处理 数据分析三剑客 Numpy : 主要为了给pandas提供数据源 pandas : 更重要的数据结构 matplotlib : 静态图形处理 海滨城市温度分析案例 1. 导包 2. 导入数据(各个海滨城的数据) 3. 去除没用的列 4. 构造数据,显示最高温度 阅读全文

摘要： Pandas pandas需要导入 1 Series Series是一种类似与一维数组的对象，由下面两个部分组成： values：一组数据（ndarray类型） index：相关的数据索引标签 Series的创建:默认索引为0到N 1的整数型索引 1. 由列表创建 2. 由numpy数组创建 2 S 阅读全文

摘要： Numpy NumPy(Numerical Python) 是 Python 语言的一个扩展程序库，支持大量的维度数组与矩阵运算，此外也针对数组运算提供大量的数学函数库。 1 创建 ndarray 1. 使用np.array()创建 numpy默认ndarray的所有元素的类型是相同的 如果传进来的 阅读全文

摘要： 分布式爬虫 什么是分布式爬虫 基于多台电脑组件一个分布式机群,然后让每一台电脑执行同一组程序,让后让他们对同一个网站的数据进行分布式爬取 为什么使用分布式爬虫 提示爬取数据效率 如何实现分布式爬虫 基于scrapy + redis 的形式实现分布式 原生的scrapy框架不能实现分布式,原因: 1. 阅读全文