GIL全局解释器锁
GIL面试题:
描述Python GIL的概念,以及它对Python多线程的影响。编写一个多线程抓取网页的程序,并阐述多线程抓取是否可比单线程性能有提升,并解释原因。
答案:
-
Python语言和GIL没有关系,仅仅是由于历史原因在Cpython虚拟机(解释器),难以移除GIL。
-
GIL:全局解释器锁。每个线程在执行的过程都需要先获取GIL,保证同一个时刻只有一个线程可以执行代码。
-
线程释放GIL锁的情况:在IO操作等可能会引起堵塞的system call之前,可以暂时释放GIL,但在执行完毕后,必须重新获取GIL Python 3.x使用计时器(执行时间达到阈值后,当前线程释放GIL)或Python 2.x,tickets计数达到100
-
python使用多进程是可以利用多核的CPU资源的。
-
多线程爬取比单线程性能有提升,因为遇到IO堵塞会自动释放GIL锁。
计算密集型任务多线程和单线程性能差不多(建议用多进程),IO密集型任务多线程比单线程性能有提升。
解决GIL问题的办法:1.换其他语言写的python解释器(比如java写的) 2.用其他语言替代线程中执行的事情。