Python - StringIO | BytesIO | file-like Object | 序列化 | JSON

1.单元测试

①是什么？

对一个模块、一个函数或者一个类进行正确性检验的测试工作。

②最好的好处？

确保一个程序模块的行为符合我们设计的测试用例。

2.同步/异步IO

假设要把100M的数据写入磁盘，CPU输出100M的数据只需0.01秒，而磁盘接收这100M的数据可能需要10秒。
①同步IO，CPU等着，也就是程序暂停执行后续代码，等100M的数据在10秒后写入磁盘，再进行别的操作。
②异步IO，CPU不等待，后续代码可以立即执行。

3.由于文件读写时都有可能产生`IOError`，一旦出错，后续的`f.close()`将不会调用。所以，为了保证无论是否出错都能正确地关闭文件，可以通过`try...finally`实现。

try:
    f = open('/path/to/file','r')
    print(f.read())
finally:
    if f:
        f.close()

还有种简便的方式：

with open('/path/to/file','r') as f:
    print(f.read())

4.如果文件很小，`read()`一次性读取最方便；如果不能确定文件大小，反复调用`read(size)`比较保险；如果是配置文件，调用`readlines()`最方便。

for line in f.readlines():
    print(line.strip())#把末尾的'\n'删掉

5.像`open()`函数返回的这种有个`read()`方法的对象，在`Python`中统称为`file-like Object`。除了`file`外，还可以是内存的字节流、网络流、自定义流等等。`StringIO`就是在内存中创建的`file-like Object`，常用作临时缓冲。

6.用`with`语句来读取文件中的数据或向文件中写入数据较为保险。

用with语句来读取和写入文本数据.png

7.`StringIO`

①很多时候，数据读写不一定是文件，也可以在内存中读写。

StringIO.png

getvalue()方法用于获得写入的str

②可以用一个str来初始化StringIO，然后，像读文件一样读取。

读取StringIO.png

8.`BytesIO`

①BytesIO用于操作二进制数据。

BytesIO实现在内存中读写bytes.png

9.`StringIO`和`BytesIO`是在内存中操作`str`和`bytes`的方法，和读写文件具有一致的接口。

11.拆分路径和获得文件拓展名

split和splitext.png

12.列出当前目录下的所有目录和所有`.py`文件

列出当前目录下的所有子目录和py文件.png

13.查找当前目录或其子目录下包含`change`字符串的文件。

查找当前目录或子目录下包含change字符串的文件.png

14.序列化

①是什么？

把变量从内存中变成可存储或传输的过程。在Python中叫做pickling。

②Python提供pickle模块来实现序列化。

③pickle.dumps() - 把任何对象序列化成一个bytes

pickle_dumps.png

④pickle.dump() - 直接把对象序列化后写入一个file-like Object

pickle_dump().png

⑤pickle.loads() - 将bytes反序列化出对象

pickle_loads().png

⑥pickle.load() - 从一个file-like Object中直接反序列化出对象

pickle_load().png

15.`JSON`

①Python内置的json模块提供了非常完善的Python对象到JSON格式的转换。

②dumps()方法返回一个str，内容就是标准的JSON。类似的，dump()方法可以直接把JSON写入一个file-like Object。

json_dumps().png

③要把JSON反序列化成Python对象，可以使用loads()或对应的load()方法，前者把JSON的字符串反序列化，后者从file-like Object中读取字符串并反序列化。

json_loads().png

16.将一个`Class`转换成`JSON`对象的两种方式

①创建一个student2dict()函数

stdudent2dict().png

②default lambda obj: obj.__dict__。因为通常class的实例都有一个__dict__属性，它就是一个dict，用来存储实例变量。

obj___dict__.png

17.对于类，将`JSON`对象反序列化成`dict`对象

反序列化类.png

②传入的object_hook()函数将dict转换成Student实例

打印出来的是反序列化的Student实例对象.png

18.进程和线程

①对于操作系统来说，一个任务就是一个进程Process。

②在一个进程内部，可能需要干多件事情，就需要同时运行多个"子任务"，这些"子任务"就称为线程Thread。如在Word中，可以同时打字、拼写检查、打印等等。

③线程是最小的执行单元，而进程至少由一个线程组成。

Python - StringIO | BytesIO | file-like Object | 序列化 | JSON |