潘红伟 - 博客园

python scrapy框架

摘要：性能相关在编写爬虫时，性能的消耗主要在IO请求中，当单进程单线程模式下请求URL时必然会引起等待，从而使得请求整体变慢。同步执行 import requests def fetch_async(url): response = requests.get(url) return response 阅读全文

posted @ 2018-05-14 15:57 潘红伟阅读(278) 评论(0) 推荐(0) 编辑

redis memcache rabbitMQ

摘要： Python之路【第九篇】：Python操作 RabbitMQ、Redis、Memcache、SQLAlchemy Memcached Memcached 是一个高性能的分布式内存对象缓存系统，用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数，从而提高动态、数据阅读全文

posted @ 2018-04-24 17:20 潘红伟阅读(245) 评论(0) 推荐(0) 编辑

requests beautifulsoup

摘要： requests Python标准库中提供了：urllib、urllib2、httplib等模块以供Http请求，但是，它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作，甚至包括各种方法覆盖，来完成最简单的任务。 Requests 是使用 Apache2 License 阅读全文

posted @ 2018-04-24 16:59 潘红伟阅读(233) 评论(0) 推荐(0) 编辑

Flask

摘要： Oldboy s4 Flask Flask是一个基于Python开发并且依赖jinja2模板和Werkzeug WSGI服务的一个微型框架，对于Werkzeug本质是Socket服务端，其用于接收http请求并对请求进行预处理，然后触发Flask框架，开发人员基于Flask框架提供的功能对请求进行相阅读全文

posted @ 2018-04-24 16:54 潘红伟阅读(211) 评论(0) 推荐(0) 编辑

Django的 CBV和FBV

摘要： FBV CBV 回顾多重继承和Mixin 回到顶部 FBV FBV（function base views）就是在视图里使用函数处理请求。在之前django的学习中，我们一直使用的是这种方式，所以不再赘述。回到顶部 CBV CBV（class base views）就是在视图里使用类处理请求阅读全文

posted @ 2018-04-11 11:12 潘红伟阅读(268) 评论(0) 推荐(0) 编辑

Django rest_framewok框架的基本组件

摘要：快速实例序列化视图三部曲认证与权限组件解析器分页回到顶部快速实例 Quickstart 回到顶部序列化创建一个序列化类简单使用开发我们的Web API的第一件事是为我们的Web API提供一种将代码片段实例序列化和反序列化为诸如json之类的表示形式的方式。我们可以通过声明与D 阅读全文

posted @ 2018-04-11 11:10 潘红伟阅读(966) 评论(0) 推荐(1) 编辑

Django restfull规范

摘要：一. 什么是RESTful REST与技术无关，代表的是一种软件架构风格，REST是Representational State Transfer的简称，中文翻译为“表征状态转移” REST从资源的角度类审视整个网络，它将分布在网络中某个节点的资源通过URL进行标识，客户端应用通过URL来获取资源的阅读全文

posted @ 2018-04-11 11:08 潘红伟阅读(512) 评论(0) 推荐(0) 编辑

Python3中的zip()

摘要：最近因为写程序的时候用到过zip()这个内建的方法，网上大多的介绍都是Python2版本的，很少有Python3版本的详细介绍。对于我这个在Python3下开始学习的菜鸟来说，确实是搞不太懂这其中的区别，所以花了我很长时间才算基本搞明白zip()：先来看官方的文档介绍吧： Python2.7.11 阅读全文

posted @ 2018-02-03 22:40 潘红伟阅读(1368) 评论(0) 推荐(0) 编辑

关于负数的isdigit()判断

摘要：今天写作业的时候突然想到，一直使用isdigit()方法来处理用户的输入选择是不是数字，但是如果用户输入的是负数呢，会不会导致bug？然后我就试了一下，居然不报错。。。然后我就纳闷了，赶紧试了一下：先来看看str类的.isdigit()方法的文档。很显然'-10'.isdigit()返回Fal 阅读全文

posted @ 2018-02-03 22:39 潘红伟阅读(598) 评论(0) 推荐(0) 编辑

Win7 x64安装Paramiko

摘要：先说一下我的环境： win7 x64 旗舰版、Python3.5.0、pip8.1.0 win7 x64 旗舰版、Python3.5.0、pip8.1.0 pip install paramiko时报错如下：大概意思： blablabla... 反正大概意思就是少GMP or MPIR? warn 阅读全文

posted @ 2018-02-03 22:38 潘红伟阅读(144) 评论(0) 推荐(0) 编辑