Day-11: IO编程

  由于CUP的运行速度远高于其他外设,IO操作有两种方式:

  同步IO:CUP登着,程序暂停直到执行完后续代码

  异步IO:CUP不等待,去做其他的事情,磁盘做完该做的事情后,告诉CUP,CUP再进行后续代码

  异步IO操作较为复杂,这里记录同步IO操作。

  • 文件读写

  Python中读写文件是通过由操作系统提供的。

  读文件:先使用open()方法打开文件,之后使用read()方法读入内存。

>>> f = open('/Users/michael/test.txt', 'r')
>>> f.read()
'Hello, world!'

  最后,必须close()关闭文件,因为文件对象会占用操作系统的资源。

>>> f.close()

  而在其中一旦出了错误,就会抛出IOError,为了保证最后能close(),使用with语句,来代替

with open('/path/to/file', 'r') as f:
    print f.read()

  其中,read()一次性读取全部内容,read(size),每次读取size个字节的内容,readline()每次读取一行内容,readlines()一次读取所有内容,每一行都储存在list的一个元素中。

对于readlines()可以使用:

for line in f.readlines():
    print(line.strip()) # 把末尾的'\n'删掉

  凡是可以使用open()打开的对象,都是file-like Object。除了file外,还有内存的字节流,网络流,自定义流等。

  普通的文件是以ASCII码编写的,而对于图片,视频等是由二进制文件编写的,得用‘rb’模式打开。

  对于非ASCII编码的文件,必须得由二进制模式打开,再解码。比如GBK编码的文件:

>>> f = open('/Users/michael/gbk.txt', 'rb')
>>> u = f.read().decode('gbk')
>>> u
u'\u6d4b\u8bd5'
>>> print u
测试

这里有简化的方法,利用codecs模块,自动转码

import codecs
with codecs.open('/Users/michael/gbk.txt', 'r', 'gbk') as f:
    f.read() # u'\u6d4b\u8bd5'

  写文件:写文件与读文件类似,为确保数据全部由内存写入文件,使用with语句

with open('/Users/michael/test.txt', 'w') as f:
    f.write('Hello, world!')

如有特定编码的文本文件,使用codecs模块。

  • 操作文件和目录

   获取环境变量:os.environ

  获取某个环境变量的值:os.getenv(‘PATH’)

  查看当前目录的据对路径:os.path.abspath('.')

  将两个路径拼成一个:os.path.join('/User/michael', 'testdir')

  创建一个目录:os.mkdir('/Users/michael/testdir')

  删除一个目录:os.rmdir('/Users/michael/testdir')

  拆分路径,得到最后一级的文件或目录名:os.path.split('/Users/michael/testdir/file.txt')

  拆分路径,得到文件扩展名:os.path.splitext('/path/to/file.txt')

  文件重命名:os.rename('test.txt', 'test.py')

  删掉文件:os.remove('test.py')

  复制文件:在shutil模块中的copyfile()

  列出当前目录下的所有目录:[x for x in os.listdir('.') if os.path.isdir(x)]

  列出所有的.py文件:[x for x in os.listdir('.') if os.path.isfile(x) and os.path.splitext(x)[1]=='.py']

  • 序列化

  变量从内存中变成可储存或传输的过程称为序列化,Python中负责序列化的叫做pickle和cPickle。

  pickle和cPickle的区别在于cPickle是用c写的,速度快;pickle是用python写的,速度慢。所以:

try:
    import cPickle as pickle
except ImportError:
    import pickle

  将对象序列化并写入文件:

>>> f = open('dump.txt', 'wb')
>>> pickle.dump(d, f)
>>> f.close()

  将对象从磁盘读到内存,反序列化:

>>> f = open('dump.txt', 'rb')
>>> d = pickle.load(f)
>>> f.close()
>>> d
{'age': 20, 'score': 88, 'name': 'Bob'}

  pickle序列化对象后,存储的变量和原来的变量完全不一样,知识内容相同,而且每个语言序列化后的变量也是不一样的。为了在不同的编程语言间传递对象,必须把对象序列化为标准格式。Python内置的json模块提供了非常完善的Python对象到JSON格式的转换。

{} dict
[] list
"string" 'str'或u'unicode'
1234.56 int或float
true/false True/False
null None

使用json.dump方法

>>> import json
>>> d = dict(name='Bob', age=20, score=88)
>>> json.dumps(d)
'{"age": 20, "score": 88, "name": "Bob"}'

类似的,dump()方法可以直接把JSON写入一个file-like Object

JSON反序列化

>>> json_str = '{"age": 20, "score": 88, "name": "Bob"}'
>>> json.loads(json_str)
{u'age': 20, u'score': 88, u'name': u'Bob'}

loads()把JSON的字符串反序列化,load()从file-like Object中读取字符串并序列化

将Student实例变成一个JSON对象。

def student2dict(std):
    return {
        'name': std.name,
        'age': std.age,
        'score': std.score
    }

print(json.dumps(s, default=student2dict))

将JSON反序列化为一个Student对象实例

def dict2student(d):
    return Student(d['name'], d['age'], d['score'])

json_str = '{"age": 20, "score": 88, "name": "Bob"}'
print(json.loads(json_str, object_hook=dict2student))

  注:本文为学习廖雪峰Python入门整理后的笔记

posted @ 2017-09-15 09:33  倔强的小蚂蚁  阅读(138)  评论(0编辑  收藏  举报