11 2017 档案
摘要：介绍 在Python中，所有以“__”双下划线包起来的方法，都统称为“Magic Method”，中文称『魔术方法』,例如类的初始化方法 __init__ ,Python中所有的魔术方法均在官方文档中有相应描述，但是对于官方的描述比较混乱而且组织比较松散。很难找到有一个例子。 构造和初始化 每个Py
阅读全文
摘要：在列表，元组，实例，类，字典和函数中存在循环引用问题。有 __del__ 方法的实例会以健全的方式被处理。给新类型添加GC支持是很容易的。支持GC的Python与常规的Python是二进制兼容的。 分代式回收能运行工作（目前是三个分代）。由 pybench 实测的结果是大约有百分之四的开销。实际上所
阅读全文
摘要：Python中日期格式化是非常常见的操作，Python 中能用很多方式处理日期和时间，转换日期格式是一个常见的功能。Python 提供了一个 time 和 calendar 模块可以用于格式化日期和时间。时间间隔是以秒为单位的浮点小数。每个时间戳都以自从格林威治时间1970年01月01日00时00分
阅读全文
摘要：工作中可能会涉及处理pdf文件，PyPDF2就是这样一个库， 使用它可以轻松的处理pdf文件，它提供了读、写、分割、合并、文件转换等多种操作。官方地址：http://mstamy2.github.io/PyPDF2/ 安装 1. RPM式系统（Redhat、CentOS） 1 pip install
阅读全文
摘要：一、SQL注入简介 SQL注入是比较常见的网络攻击方式之一，它不是利用操作系统的BUG来实现攻击，而是针对程序员编程时的疏忽，通过SQL语句，实现无帐号登录，甚至篡改数据库。 二、SQL注入攻击的总体思路 1.寻找到SQL注入的位置 2.判断服务器类型和后台数据库类型 3.针对不通的服务器和数据库特
阅读全文
摘要：首先，缓存的对象有三种： 1：数据库中单条的的数据（以表名跟id作为key永久保存到redis），在有更新的地方都要更新缓存（不适用于需要经常更新的数据）； 2：对于一些不分页，不需要实时（需要多表查询）的列表，我们可以将列表结果缓存到redis中，设定一定缓存时间作为该数据的存活时间。用获取该列表
阅读全文
摘要：一、numpy概述 numpy（Numerical Python）提供了python对多维数组对象的支持：ndarray，具有矢量运算能力，快速、节省空间。numpy支持高级大量的维度数组与矩阵运算，此外也针对数组运算提供大量的数学函数库。 二、创建ndarray数组 ndarray：N维数组对象（
阅读全文
摘要：看代码。。。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51
阅读全文
摘要：约定： 1 2 3 一、CSV数据的导入和保存 csv数据一般格式为逗号分隔，可在excel中打开展示。 示例 data1.csv： 1 2 3 4 5 代码示例： 1 2 3 4 5 6 7 8 9 10 示例data2.csv： 1 2 3 4 代码示例： 1 2 3 4 5 6 7 8 9 1
阅读全文
摘要：SQL Server日志文件过大 大日志文件清理方法 ，网上提供了很多分离数据库——〉删除日志文件-〉附加数据库 的方法，此方法风险太大，过程也比较久，有时候也会出现分离不成功的现象。下面的方式是不需要做数据库分离和附加操作的。 SQL 2008收缩清空日志方法：1.在SQL2008中清除日志就必须
阅读全文
摘要：一:概念: 我们知道IP地址是标志网络中不用主机的IP地址,而端口号就是同一台主机上标志不同进程的地址,IP地址和端口号标志网络中的唯一地址.(又称socket) 在TCP协议中,建⽴立连接的两个进程各⾃自有⼀一个socket来标识,那么这两个组成 的socket就唯⼀一标识⼀一个连接。socket
阅读全文
摘要：MYSQL千万级数据表，创建表及字段扩展的几条建议 一：概述 当我们设计一个系统时，需要考虑到系统的运行一段时间后，表里数据量大约有多少，如果在初期，就能估算到某几张表数据量非常庞大时（比如聊天消息表），就要把表创建好，这篇文章从创建表，增加数据，以及字段扩展，这几个方面来给出建议。 二：创建表 假
阅读全文
摘要：1、针对Web的攻击技术 在Web应用中，从浏览器那接收到的Http的全部内容，都可以在客户端自由地变更、篡改，所以Web应用可能会接收到与预期数据不相同的内容。在Http请求报文内加载攻击代码，就能发起对Web应用的攻击。通过URL查询字段或表单、Http首部、Cookie等途径吧攻击代码传入，若
阅读全文
摘要：一、Ajax请求 1、jQuery.ajax(options) 通过 HTTP 请求加载远程数据。jQuery 底层 AJAX 实现。简单易用的高层实现见 .get,.post 等。 .ajax()返回其创建的XMLHttpRequest对象。大多数情况下你无需直接操作该对象，但特殊情况下可用于手动
阅读全文
摘要：最近整理了一些数据库常见的面试题，对自己也是个复习，希望对大家也有所帮助。 1.触发器的作用？ 触发器是一类特殊的存储过程，主要是通过事件来触发而被执行的。它可以强化约束，来维护数据的完整性和一致性，可以跟踪数据库内的操作从而不允许未经许可的更新和变化。可以联级运算。如，某表上的触发器上包含对另一个
阅读全文
摘要：独立索引： 独立索引是指索引列不能是表达式的一部分，也不能是函数的参数 例1： SELECT actor_id FROM actor WHERE actor_id+1=5 --这种写法，就算在actor_id上建立了索引，也不起效 例2: SELECT .... WHERE TO_DAYS(CURR
阅读全文
摘要：1、首先利用request库去请求数据，天气预报使用的是和风天气的API（www.heweather.com/douments/api/s6/weather-forecast） 2、利用python的jinja2模块写一个html模板，用于展示数据 3、python的email构建邮件，smtpli
阅读全文
摘要：入坑(简称IT)这一行也有些年头了，但自老师讲课提过排序算法后几乎再也没写过排序算法，当然这也没有什么问题，实际的排序大多是将数据从数据库取出来前在数据库中就已经做好排序了，当然这个排序是SQL范畴的，如果真的需要在代码中排序也有对应的工具类来处理，就比如有Java中有Array.sort()来排列
阅读全文
摘要：目录 str类型的中文 第一种姿势：逐个打印 第二种姿势： json dumps 第三种姿势： repr string_escape 第四种姿势：PEP3140 unicode类型的中文 当str与unicode中文并存时 总结 reference 第一种姿势：逐个打印 第二种姿势： json du
阅读全文
摘要：今天（恰巧是今天）看到有人在 SegmentFault 上问「TCP server 为什么一个端口可以建立多个连接？」。提问者认为 client 端就不能使用相同的本地端口了。理论上来说，确定一条链路，只要五元组（源IP、源端口号、目标IP、目标端口号、协议）唯一就可以了，所以这不应该是技术限制。而
阅读全文
摘要：这事本来是有个 browsercookie 库可以做的，但是初看它就有不少问题： 我在尝试解决这些问题时，又发现了额外的问题：它每次都要把所有的 cookie 全部读取。再加上不必要地导入 keyring、Crypto 等库，让我想放弃了。 于是我考虑自己实现一个 cookiejar。但发现它有如下
阅读全文
摘要：一、前言 一个程序至少有一个主线程，主线程启动子线程后，它们之间并没有隶属关系。主线程和子线程执行是并行的，相互独立。主线程执行完毕后默认不等子线程执行结束就接着往下走了，如果有其他程序就会运行另外的程序，如果没有就等待子线程执行完成后结束程序。 + View Code + View Code +
阅读全文
摘要：目录 从字符编码说起 unicode与utf-8 当编解码遇上Python2.x unicode 与 str 区别 __str__ __repr__的区别 unicode str utf-8关系 unicode.encode 与 unicode.__str__的区别 unicode gbk之间的转换
阅读全文
摘要：1、打开文件的例子： 2、利用urllib库请求页面进行简单的翻译，请求百度翻译，将要翻译的内容当做参数传给百度，然后将结果赋值给参数，最后打印出来： 上代码： 实现效果如图：
阅读全文
摘要：在采集美女站时,需要对关键词进行分词,最终采用的是python的结巴分词方法. 中文分词是中文文本处理的一个基础性工作，结巴分词利用进行中文分词。其基本实现原理有三点： 安装（Linux环境） 下载工具包，解压后进入目录下，运行：python setup.py install 模式 接口 组件只提供
阅读全文
摘要：我正尝试使用matplotlib读取RGB图像并将其转换为灰度。在matlab中，我使用这个： 1 img = rgb2gray(imread('image.png')); 1 img = rgb2gray(imread('image.png')); 1 img = rgb2gray(imread(
阅读全文
摘要：Python常见部署方法有 ： fcgi ：用spawn-fcgi或者框架自带的工具对各个project分别生成监听进程，然后和http 服务互动 wsgi ：利用http服务的mod_wsgi模块来跑各个project(Web应用程序或框架简单而通用的Web服务器 之间的接口)。 uWSGI 是一
阅读全文
摘要：使用web.py做http server开发时，遇到postman能够正常请求到数据，但是浏览器无法请求到数据，查原因之后发现是跨域请求的问题。 跨域请求，就是在浏览器窗口中，和某个服务端通过某个 “协议+域名+端口号” 建立了会话的前提下，去使用与这三个属性任意一个不同的源提交了请求，那么浏览器就
阅读全文
摘要：一个完整的计算机系统是由硬件、操作系统、应用软件三者组成,具备了这三个条件，一台计算机系统就可以玩单机游戏。如果你想上网（访问个黄色网站，发个黄色微博啥的），就需要遵守网络协议，即计算机之间交流的标准，按照分工不同可以把互联网协议从逻辑上划分层级，即ios七层协议，详见另一篇博客。参考博客（网络通信
阅读全文
摘要：看到他们黑站感觉很有意思的样子，于是我也玩了一下午，虽然都是些狠狠狠简单的东西，不过还是记录下来啦。 虽然和我现在做的没啥关系，不过，，，挺好 浏览器的“工具”——“internet选项”——“高级”——“显示友好http错误信息”（里的勾给去掉哦）注明：就是显示页面出错的信息。 2通过在搜索框中输
阅读全文
摘要：首先给大家讲个段子： 2015年开网吧，买了 DDR4 8g 内存条400多根，一根180块，今年2017年，网吧赔了20多万，昨天我把网吧电脑全卖了。内存条600一根，居然赚回了我网吧的钱，感谢三星，感谢人民，感谢党。。。 今年以来，内存条价格暴涨，已经跃升为新的新一代理财产品，所以今天就和大家讨
阅读全文
摘要：通过上一篇文章的扯淡，我们应该已经明白了存储器的层次结构，技术细节很复杂，但是思想却不难理解，因为就是很简单的缓存思想。那么本文我们开始讨论关于内存的另一个话题.虚拟内存。其实思想也是很容易理解的。 我不知道有多少人听过虚拟内存这个概念，但是虚拟内存是计算机系统最重要的概念之一，并且它成功的主要原因
阅读全文
摘要：字典是针对非序列集合而提供的一种数据类型，字典中的数据是无序排列的。 字典的操作 为字典增加一项 dict[key] = value [python] view plain copy students = {"Z004":"John","T002":"Peter"} students Out[23]
阅读全文
摘要：第一个模块，模拟登陆sina微博，创建weiboLogin.py文件，输入以下代码： [python] view plain copy #! /usr/bin/env python # -*- coding: utf-8 -*- import sys import urllib import url
阅读全文
摘要：目录 0. 准备工作 1. Fiddler配置 2. iPhone配置 3. 抓包示例 目录 0. 准备工作 1. Fiddler配置 2. iPhone配置 3. 抓包示例 上篇Fiddler教程，我们教了大家Fiddler安装配置及如何使用Fiddler进行基本的Http抓包及模拟请求，今天给大
阅读全文
摘要：秋千制作过程的漫画最早出现在20世纪70年代。后来，秋千漫画出现了许多变种，如用来比喻软件开发过程和管理的漫画。秋千漫画描述了在实际制作秋千这个需求过程中，各个部门之间的理解配合及完成需求的差异。 2003年首次出现了这副秋千漫画，该漫画主题主要是描述软件开发项目中的感知差距。这幅漫画也在企业的管理
阅读全文
摘要：Base64编码是一种“防君子不防小人”的编码方式。广泛应用于MIME协议，作为电子邮件的传输编码，生成的编码可逆，后一两位可能有“=”，生成的编码都是ascii字符。优点：速度快，ascii字符，肉眼不可理解缺点：编码比较长，非常容易被破解，仅适用于加密非关键信息的场合Python中进行Base6
阅读全文
摘要：在python的解释器中，CPython是应用范围最广的一种，其具有丰富的扩展包，方便了开发者的使用。当然CPython也不是完美的，由于全局解释锁（GIL）的存在，python的多线程可以近似看作单线程。为此，开发者推出了multiprocessing，这里介绍一下使用中的常见问题。 环境 共享变
阅读全文
摘要：最近看了July的一些关于Java处理海量数据的问题研究，深有感触，链接：http://blog.csdn.net/v_july_v/article/details/6685962 感谢July ^_^ 他用的是Java的Hash Map等方法做了处理，讲解的非常深刻入骨 我也一时兴起，想拿Pyth
阅读全文
摘要：机器学习中的预测问题通常分为2类：回归与分类。 简单的说回归就是预测数值，而分类是给数据打上标签归类。 本文讲述如何用Python进行基本的数据拟合，以及如何对拟合结果的误差进行分析。 本例中使用一个2次函数加上随机的扰动来生成500个点，然后尝试用1、2、100次方的多项式对该数据进行拟合。拟合的
阅读全文
摘要：需求：快速进行ftp上传 ，下载，查询文件 原来直接在shell下操作： 需要【连接，输用户名，输密码，单文件操作，存在超时限制】 太过于繁琐，容易操作失败 脚本改进： 一句命令，搞定多文件上传，下载，查询，列表等操作 后期可以加入更强大的功能 直接上脚本： #!/usr/bin/python #f
阅读全文
摘要：用Python做一个QQ自动点赞神器，上代码： 这里定义了一个函数，输入QQ号码就可以直接登录ta的空间去点赞了。我这里是使用了Chrome浏览器去操作的，推荐大家使用Firefox。如果大家和我一样是使用Chrome，需要下载一个与你selenium对应版本的chromedriver.exe，需要
阅读全文
摘要：创建工程 创建mysite工程项目： 工程目录结构： manage.py Django项目里面的工具，通过它可以调用django shell和数据库等。 settings.py 包含了项目的默认设置，包括数据库信息，调试标志以及其他一些工作的变量。 urls.py 负责把URL模式映射到应用程序。
阅读全文
摘要：Fiddler是最强大最好用的Web调试工具之一，它能记录所有客户端和服务器的http和https请求，允许你监视，设置断点，甚至修改输入输出数据. 使用Fiddler无论对开发还是测试来说，都有很大的帮助。 阅读目录 Fiddler的基本介绍 Fiddler的官方网站: www.fiddler2.
阅读全文
摘要：近期帮朋友做了几个用到微信公众号接口的活，所以总结下。 一、微信公众号后台配置 公众号分订阅号，服务号，企业号，可以调用的接口权限各不相同，这里就不赘述，参考官方说明。 实际上开发时生产用的公众号是不允许用来调试接口，所以微信公众号提供了微信测试号。 公众号后台 -> 公众平台测试帐号 -> 按照指
阅读全文
摘要：摘要: 1行代码实现人脸识别，1. 首先你需要提供一个文件夹，里面是所有你希望系统认识的人的图片。其中每个人一张图片，图片以人的名字命名。2. 接下来，你需要准备另一个文件夹，里面是你要识别的图片。3. 然后你就可以运行face_recognition命令了，把刚刚准备的两个文件夹作为参数传入，命令
阅读全文
摘要：本次爬取的贴吧是百度的美女吧，给广大男同胞们一些激励 在爬取之前需要在浏览器先登录百度贴吧的帐号，各位也可以在代码中使用post提交或者加入cookie 爬行地址：http://tieba.baidu.com/f?kw=%E7%BE%8E%E5%A5%B3&ie=utf-8&pn=0 #-*- co
阅读全文
摘要：Redis是业界普遍应用的缓存组件，研究一个组件框架，最直观的办法就是从应用方的角度出发，将每个步骤的考虑一番，从这些步骤入手去研究往往能够最快的体会到一个组件框架的设计哲学。以Redis为例，每当发起一条请求时，redis是如何管理管理网络请求，收到请求后又是通过什么样的数据结构进行组织并操作内存
阅读全文
摘要：站在网站管理的角度，如果在同一时间段，大家全部利用爬虫程序对自己的网站进行爬取操作，那么这网站服务器能不能承受这种负荷？肯定不能啊，如果严重超负荷则会时服务器宕机（死机）的，对于一些商业型的网站，宕机一秒钟的损失都是不得了的，这不是一个管理员能承担的，对吧？那管理员会网站服务器做什么来优化呢？我想到
阅读全文
摘要：Python web开发中常用的标准库简介 开发过程中，深有体会的一点就是，学习一门编程语言，除了要精通它的语法以外，更需要我们去学习该门语言的标准库。标准库是多年以来，大量开发人员留给我们的宝贵财富，它涵盖了编程中的方方面面。从发送Email到GUI开发，再到内置的Http服务器，一应俱全。 Py
阅读全文
摘要：收集总结了一下python安全方面的知识点以及近年来的相关漏洞，如果有需要修正或补充的地方，欢迎各位师傅的指出。 常见web漏洞在python中的示例。 xss python下的xss其原理跟php是一样的，django近年的例子如下： CVE-2017-12794,此例中通过抛出异常造成xss。
阅读全文
摘要：目录 Best Effort 分布式事务解决方案比较 分支事务串并行与LPO 再论TCC 实践案例 references 正文 在前面《从银行转账失败到分布式事务：总结与思考》一文中，已经总结了分布式事务的各种解决方法，以及自己的一点思考。本文算是对上文的一个补充：进一步的思考，主要是这些解决方法在
阅读全文
