摘要：
这一年一直在用云笔记，平时记录一些tips或者问题很方便，所以也就不再用博客进行记录，还是想把最近学习到的一些东西和大家作以分享，也能够对自己做一个总结。工作中主要基于django框架，进行项目的开发，我是主要做后台相关比较多一些，熟悉django的同学知道，django的后台进程通常通过下面这种方 阅读全文
|
摘要：
这一年一直在用云笔记，平时记录一些tips或者问题很方便，所以也就不再用博客进行记录，还是想把最近学习到的一些东西和大家作以分享，也能够对自己做一个总结。工作中主要基于django框架，进行项目的开发，我是主要做后台相关比较多一些，熟悉django的同学知道，django的后台进程通常通过下面这种方 阅读全文
摘要：
之前两篇文章讨论了进程意外退出时，如何杀死子进程，这节我们研究下在使用进程池multiprocessing.Pool时，如何保证主进程意外退出，进程池中的worker进程同时退出，不产生孤儿进程。如果对python标准库进程池不清楚的园友，可以看下之前写的几篇文章。我们尝试下主进程中使用进程池，看看 阅读全文
摘要：
之前文章讨论了进程意外退出时，如何将主进程创建的子进程终止，避免形成孤儿进程，两种做法，一种是将是将主进程中创建的子进程信息保存，使用信号处理机制，在主进程收到终止信号SIGTERM时，保存的子进程信息terminate，之后主进程退出；另一种是更加直接，通过进程组id将整个进程组中的进程杀死。这两 阅读全文
摘要：
在Python中，由于全局解释器锁GIL的存在，使得Python中的多线程并不能大大提高程序的运行效率（这里单指CPU密集型），那么在处理CPU密集型计算时，多用多进程模型来处理，而Python标准库中提供了multiprocessing库来支持多进程模型的编程。multiprocessing中提供 阅读全文
摘要：
最近做了一个小的需求，在django模型中通过前台页面的表单的提交（post），后台对post的参数进行解析，通过models模型查询MySQL，将数据结构进行加工，返回到前台页面进行展示。由于对django中QuerySet特性的不熟悉，所以测试过程中发现了很多问题。 开始的阶段没有遇到什么... 阅读全文
摘要：
之前文章对python中进程池的原理、数据流以及应用从代码角度做了简单的剖析，现在让我们回头看看标准库中对进程池的实现都有哪些值得我们学习的地方。我们知道，进程池内部由多个线程互相协作，向客户端提供可靠的服务，那么这些线程之间是怎样做到数据共享与同步的呢？在客户端使用apply/map函数向进程... 阅读全文
摘要：
之前文章中介绍了python中multiprocessing模块中自带的进程池Pool，并对进程池中的数据结构和各个线程之间的合作关系进行了简单分析，这节来看下客户端如何对向进程池分配任务，并获取结果的。 我们知道，当进程池中任务队列非空时，才会触发worker进程去工作，那么如何向进程池中的... 阅读全文
摘要：
python中两个常用来处理进程的模块分别是subprocess和multiprocessing，其中subprocess通常用于执行外部程序，比如一些第三方应用程序，而不是Python程序。如果需要实现调用外部程序的功能，python的psutil模块是更好的选择，它不仅支持subproces... 阅读全文
摘要：
编写同步队列时，有用到条件变量，对操作队列的线程进行同步。当队列为空时，允许get线程挂起，直到add线程向队列添加元素并通过唤醒条件变量，get线程继续向下运行。条件变量在多线程程序中用来实现“等待->唤醒”逻辑常用的方法。条件变量要和互斥量相联结，以避免出现条件竞争：一个线程预备等待一个条件... 阅读全文
摘要：
当我们希望使用容器来保存继承体系中的对象时，容器用于继承体系中的类型会有影响：派生类对象复制到基类对象时，派生类对象将被切掉。那么解决这一问题的方法通常是使用容器保存基类对象的指针，这些指针实际指向的是程序运行时动态分配的派生类对象，用户必须保证在容器析构前调用delete来释放动态分配的对象，... 阅读全文
|