十六、Python GIL(全局解释器锁)
面试题:描述python GIL的概念,以及它对python多线程的影响?编写一个多线程爬取网页的程序,并阐明多线程抓取程序是否比单线程性能有提升,并解释原因。
参考答案:
(1)Python语言和GIL没有关系,仅仅是由于历史原因在CPython虚拟机(解释器),难以移除,解决办法一:通过调用模块来解决,解决办法二:更换解释器。
(2)GIL:全局解释器锁。每个线程在执行的过程中都需要先获取GIL,保证同一时刻只有一个线程可以执行代码。
(3)线程释放GIL锁的情况:在IO操作等可能会引起阻塞的system call之前,可以暂时释放GIL,但在执行完毕后,必须重新获取GIL ;Python 3.x使用计时器(在执行时间达到阈值后,当前线程释放GIL)或Python 2.x的tickets计数达到100。
(4)python使用多进程可以利用多核CPU的资源。
(5)多线程爬虫比单线程性能有提升,因为遇到IO阻塞会自动释放GIL锁。