Python的open函数文件读写线程不安全,logging模型文件读写线程安全!
工作中遇到的问题:如何在多线程的程序中同时记录日志?
最初图省事,使用了最原始的open函数来写日志,因为开始使用的写文件模式的是追加('a'),发现并没有线程不安全的现象,各个线程的的日志信息都写入到了日志文件中。
后来将写文件模式改成了只写默认('w'),这时候线程不安全的问题就显露出来了,只有一个线程的日志信息被记录。
这时候觉得不能再图省事了,有必要把Python标准库中专用日志模块logging好好学习一下,果然不让人失望,logging是线程安全的。无论是只写模式,还是追加模式,多线程的日志信息都正确的被记录下来了。
以下是测试代码:
1 def file_io(message,mode): 2 with open('log_test.log',mode) as f: 3 f.write(message) 4 f.write('\n') 5 6 7 def logging_io(message,mode): 8 logging.basicConfig(level='DEBUG', 9 filename='log_test1.log', 10 filemode=mode) 11 logging.info(message) 12 13 14 if __name__ == '__main__': 15 messages= ['---hello--', '----nihaojlj', '----world%%%%%%%%%%%%%%%%%%'] 16 for m in messages: 17 th = threading.Thread(target=logging_io, args=(m,'a')) 18 th.start()
总结:
- 多线程同时写文件的时候,追加模式('a')貌似并没有线程不安全的现象
- 多线程记录日志信息,还是使用标准库的logging模块吧,它线程安全!专业的事用专业的模块!