摘要：这一年一直在用云笔记，平时记录一些tips或者问题很方便，所以也就不再用博客进行记录，还是想把最近学习到的一些东西和大家作以分享，也能够对自己做一个总结。工作中主要基于django框架，进行项目的开发，我是主要做后台相关比较多一些，熟悉django的同学知道，django的后台进程通常通过下面这种方 阅读全文

摘要：之前文章讨论了进程意外退出时，如何将主进程创建的子进程终止，避免形成孤儿进程，两种做法，一种是将是将主进程中创建的子进程信息保存，使用信号处理机制，在主进程收到终止信号SIGTERM时，保存的子进程信息terminate，之后主进程退出；另一种是更加直接，通过进程组id将整个进程组中的进程杀死。这两 阅读全文

摘要：在Python中，由于全局解释器锁GIL的存在，使得Python中的多线程并不能大大提高程序的运行效率（这里单指CPU密集型），那么在处理CPU密集型计算时，多用多进程模型来处理，而Python标准库中提供了multiprocessing库来支持多进程模型的编程。multiprocessing中提供 阅读全文

摘要：最近做了一个小的需求，在django模型中通过前台页面的表单的提交（post），后台对post的参数进行解析，通过models模型查询MySQL，将数据结构进行加工，返回到前台页面进行展示。由于对django中QuerySet特性的不熟悉，所以测试过程中发现了很多问题。 开始的阶段没有遇到什么... 阅读全文

摘要：之前文章对python中进程池的原理、数据流以及应用从代码角度做了简单的剖析，现在让我们回头看看标准库中对进程池的实现都有哪些值得我们学习的地方。我们知道，进程池内部由多个线程互相协作，向客户端提供可靠的服务，那么这些线程之间是怎样做到数据共享与同步的呢？在客户端使用apply/map函数向进程... 阅读全文

摘要：之前文章中介绍了python中multiprocessing模块中自带的进程池Pool，并对进程池中的数据结构和各个线程之间的合作关系进行了简单分析，这节来看下客户端如何对向进程池分配任务，并获取结果的。 我们知道，当进程池中任务队列非空时，才会触发worker进程去工作，那么如何向进程池中的... 阅读全文

摘要：python中两个常用来处理进程的模块分别是subprocess和multiprocessing，其中subprocess通常用于执行外部程序，比如一些第三方应用程序，而不是Python程序。如果需要实现调用外部程序的功能，python的psutil模块是更好的选择，它不仅支持subproces... 阅读全文