摘要：
阻塞IO（blocking IO） 在linux中，默认情况下所有的socket都是blocking，一个典型的读操作流程大概是这样： 当用户进程调用了recvfrom这个系统调用，kernel就开始了IO的第一个阶段：准备数据。对于network io来说，很多时候数据在一开始还没有到达（比如，还
阅读全文
posted @ 2018-11-20 11:18
sunny-cheng
阅读(155)
推荐(0)
编辑
摘要：
IO模型介绍 为了更好地了解IO模型，我们需要事先回顾下：同步、异步、阻塞、非阻塞 同步（synchronous） IO和异步（asynchronous） IO，阻塞（blocking） IO和非阻塞（non-blocking）IO分别是什么，到底有什么区别？这个问题其实不同的人给出的答案都可能不同
阅读全文
posted @ 2018-11-20 11:17
sunny-cheng
阅读(191)
推荐(0)
编辑
摘要：
一 gevent模块 Gevent 是一个第三方库，可以轻松通过gevent实现并发同步或异步编程，在gevent中用到的主要模式是Greenlet, 它是以C扩展模块形式接入Python的轻量级协程。 Greenlet全部运行在主程序操作系统进程的内部，但它们被协作式地调度。 遇到IO阻塞时会自动
阅读全文
posted @ 2018-11-19 22:43
sunny-cheng
阅读(183)
推荐(0)
编辑
摘要：
一 greenlet模块 如果我们在单个线程内有20个任务，要想实现在多个任务之间切换，使用yield生成器的方式过于麻烦（需要先得到初始化一次的生成器，然后再调用send。。。非常麻烦），而使用greenlet模块可以非常简单地实现这20个任务直接的切换 单纯的切换（在没有io的情况下或者没有重复
阅读全文
posted @ 2018-11-19 21:15
sunny-cheng
阅读(269)
推荐(0)
编辑
摘要：
一 引子 一：其中第二种情况并不能提升效率，只是为了让cpu能够雨露均沾，实现看起来所有任务都被“同时”执行的效果，如果多个任务都是纯计算的，这种切换反而会降低效率。为此我们可以基于yield来验证。yield本身就是一种在单线程下可以保存任务运行状态的方法，我们来简单复习一下： 单纯地切换反而会降
阅读全文
posted @ 2018-11-19 16:09
sunny-cheng
阅读(226)
推荐(0)
编辑
摘要：
一 进程池与线程池 在刚开始学多进程或多线程时，我们迫不及待地基于多进程或多线程实现并发的套接字通信，然而这种实现方式的致命缺陷是：服务的开启的进程数或线程数都会随着并发的客户端数目地增多而增多，这会对服务端主机带来巨大的压力，甚至于不堪重负而瘫痪，于是我们必须对服务端开启的进程数或线程数加以控制，
阅读全文
posted @ 2018-11-19 16:01
sunny-cheng
阅读(214)
推荐(0)
编辑
摘要：
一 线程queue queue is especially useful in threaded programming when information must be exchanged safely between multiple threads. 有三种不同的用法 class queue.
阅读全文
posted @ 2018-11-19 10:44
sunny-cheng
阅读(117)
推荐(0)
编辑
摘要：
一 信号量 信号量也是一把锁，可以指定信号量为5，对比互斥锁同一时间只能有一个任务抢到锁去执行，信号量同一时间可以有5个任务拿到锁去执行，如果说互斥锁是合租房屋的人去抢一个厕所，那么信号量就相当于一群路人争抢公共厕所，公共厕所有多个坑位，这意味着同一时间可以有多个人上公共厕所，但公共厕所容纳的人数是
阅读全文
posted @ 2018-11-19 09:53
sunny-cheng
阅读(141)
推荐(0)
编辑
摘要：
一 死锁现象 所谓死锁： 是指两个或两个以上的进程或线程在执行过程中，因争夺资源而造成的一种互相等待的现象，若无外力作用，它们都将无法推进下去。此时称系统处于死锁状态或系统产生了死锁，这些永远在互相等待的进程称为死锁进程，如下就是死锁 执行效果 二 递归锁 解决方法，递归锁，在Python中为了支持
阅读全文
posted @ 2018-11-18 21:22
sunny-cheng
阅读(231)
推荐(0)
编辑
摘要：
一 引子 首先需要明确的一点是GIL并不是Python的特性，它是在实现Python解析器(CPython)时所引入的一个概念。就好比C++是一套语言（语法）标准，但是可以用不同的编译器来编译成可执行代码。>有名的编译器例如GCC，INTEL C++，Visual C++等。Python也一样，同样
阅读全文
posted @ 2018-11-18 20:58
sunny-cheng
阅读(164)
推荐(0)
编辑
