序列化模块
序列化和反序列化
把不能直接存储的数据变得可存储，这个过程叫做序列化。把文件中的数据拿出来，回复称原来的数据类型，这个过程叫做反序列化。
Python中的序列化模块叫做，PHP等其它的一些语言将其称作 或者，每个语言的序列化功能可以序列化它本身的一切数据类型。
使用场景
保存这段数据一般来说有那么几种方法（入库或者保存文件），但是这段数据很复杂，而保存在数据库中需要特定的数据格式，入库的话就非常的麻烦了，而且我不想破坏数据的原有格式，那么可以选择保存为文件。
# 这是我想要保存的一段数据
lst = ['A', 'B', 'C']
# 直接使用open函数不能将非字符串和非字节流的数据写入文件
with open('data.txt', 'w', encoding='UTF-8') as fp :
fp.write(lst)
# ！ TypeError
# 将数据变成字符串就破坏了原有的数据结构（如果很复杂的数据结构几乎没有复原的可能性）
lst = str(lst)
# 将数据变成字节流：只能将字符串变成字节流数据！现在就可以使用序列化功能，将数据序列化成为字节流的格式，然后存在文件当中，当需要的时候，再从文件中读取出来，然后反序列化成为数据原来的样子，而且保证原数据的数据结构没有变化。
dumps & loads
将任意对象序列化成bytes数据，将序列化成为bytes的数据反序列成数据原本的格式。
注意：只能反序列化被序列化的数据
import pickle
# 这是我想要保存的一段数据
lst = ['A', 'B', 'C']
# dumps 把任意对象序列化成bytes
res = pickle.dumps(lst)
print(res) # b'\x80\x03]q\x00(X\x01\x00\x00\x00Aq\x01X\x01\x00\x00\x00Bq\x02X\x01\x00\x00\x00Cq\x03e.'
print(type(res)) # <class 'bytes'>
# 序列化后的bytes数据可以写入文件中。
# loads 把任意bytes反序列化成为原来的数据
lst = pickle.loads(res)
print(lst) # ['A', 'B', 'C']
print(type(lst)) # <class 'list'>
# 尝试反序列化其它的bytes数据
char = '你好'
by_char = char.encode()
new_char = pickle.loads(by_char) # _pickle.UnpicklingError: invalid load key, '\xe4'.dump & load
含义和上述的相同，只是这个可以直接操作IO对象，省时省力。
import pickle
# 这是我想要保存的一段数据
lst = ['A', 'B', 'C']
# dumps 和 loads 配合文件操作
# 序列化后写入文件
with open('test.txt', 'wb') as fp:
data = pickle.dumps(lst)
fp.write(data)
# 读取文件反序列化
with open('test.txt', 'rb') as fp:
data = fp.read()
lst = pickle.loads(data)
# dump 和 load 配合文件操作
# 序列化写入文件
with open('test.txt', 'wb') as fp:
pickle.dump(lst, fp)
# 读取文件反序列化
with open('test.txt', 'rb') as fp:
lst = pickle.load(fp)JSON序列化模块
使用场景
每种语言虽然各有自己的特点，但是几乎所以的语言都是师出同门，天下语言无不出C者。所以将每种语言共同存在的数据格式按照统一的标准去序列化就可以了，JSON诞生了。
支持的数据类型
python中支持JSON序列化的数据一共有八种类型：
JSON序列化支持这几种数据类型是因为JSON中就只支持这几种数据类型：
| python数据类型 | JSON数据类型 |
|---|---|
| int | int |
| float | float |
| bool（True，False） | bool（true，false） |
| None | null |
| str | str（必须双引号） |
| list（[]）、tuple（()） | Array（[]） |
| dict（{}） | Object（{}）（键必须是双引号） |
注意：
JSON中没有元组类型，所以会变成列表；
JSON中的对象必须使用字符串作为键，所以python中的字典数据中的非字符串键，会变成对应的JSON数据然后强转成为字符串；
import json
dict_var = {1: 1, 2.2: 2.2, False: True, '123': '123', "234": "234", None: None}
json_obj = json.dumps(dict_var)
dict_var = json.loads(json_obj)
print(dict_var)
# {'1': 1, '2.2': 2.2, 'false': True, '123': '123', '234': '234', 'null': None}JSON和pickle的区别
JSON可以序列化python八种数据，序列化为字符串。
序列化为字节流。
序列化函数
| 方法 | 含义 |
|---|---|
| dumps | 序列化 |
| loads | 反序列化 |
| dump | 序列化写入文件 |
| load | 读取文件反序列化 |
这里注意一下序列化方法的几个常用参数：
sort_keys 默认为True，对字典的键进行排序；
import json
# 开启排序
dict_var = {'B': '2', 'A': '1'}
print(dict_var) # {'B': '2', 'A': '1'}
json_char = json.dumps(dict_var, ensure_ascii=False, sort_keys=True)
dict_var = json.loads(json_char)
print(dict_var) # {'A': '1', 'B': '2'}
# 关闭排序
dict_var = {'B': '2', 'A': '1'}
print(dict_var) # {'B': '2', 'A': '1'}
json_char = json.dumps(dict_var, ensure_ascii=False, sort_keys=False)
dict_var = json.loads(json_char)
print(dict_var) # {'B': '2', 'A': '1'}
# dump 也一样哦json和pickle实际使用过程中的一些问题
在对文件进行操作的时候：
json可以连续dump，但是不能连续load
pickle可以连续dump和load
如下解释：
# json 可以连续dump，但是不能连续load
import json
# 序列化数据
lst1 = [1, 2, 3]
lst2 = [4, 5, 6]
lst3 = [7, 8, 9]
# 序列化写入文件
with open('test.json', 'w', encoding='UTF-8') as fp:
json.dump(lst1, fp)
json.dump(lst2, fp)
json.dump(lst3, fp)
# 读取文件反序列化
with open('test.json', 'r', encoding='UTF-8') as fp:
data1 = json.load(fp) # ERROR
data2 = json.load(fp)
data3 = json.load(fp)
# ！ json.decoder.JSONDecodeError: Extra data: line 1 column 10 (char 9)因为 方法序列化写入文件的时候，写入了两个及以上的数据，之后 方法在读的时候又是一次性将整个文件中的数据读取出来，这个时候，反序列化的数据成了 ，这明显不是一个json支持的数据格式，所以 失败了。
# pickle 可以连续dump，也可以连续load
import pickle
# 序列化数据
lst1 = [1, 2, 3]
lst2 = [4, 5, 6]
lst3 = [7, 8, 9]
# 序列化写入文件
with open('pickle.txt', 'wb') as fp:
pickle.dump(lst1, fp)
pickle.dump(lst2, fp)
pickle.dump(lst3, fp)
# 读取文件反序列化
with open('pickle.txt', 'rb') as fp:
data1 = pickle.load(fp) # [1, 2, 3]
print(data1)
data2 = pickle.load(fp) # [4, 5, 6]
print(data2)
data3 = pickle.load(fp) # [7, 8, 9]
print(data3)
# 尝试先逐行读取，再反序列化
with open('pickle.txt', 'rb') as fp:
datum = fp.readlines()
print(len(datum)) # 1
for data in datum:
data = pickle.loads(data)
print(data) # [1, 2, 3] # 只能读出一个可以看到 将数据都读出来了，这是因为 在写入数据的时候在每条数据后都加上了一个标记（有些人解释说是换行，但是文件中并没有换行，逐行使用 逐行读取的时候也只能获取一条，但是在文件中所有的数据都是在同一行的，我也不太懂了(无奈)），然后 每次就只会读一条数据，从IO指针读到每条数据后的那个标记为止，所以，可以连续的 。
怎么解决json的这个问题？
json的主要作用多语言之前的数据传递和数据存储，每个JSON文件中最好只储存一条完整的数据。
但是我就想在一个json文件中存多个数据呢？
其实思路很简单，关键就是读取文件然后反序列化的时候，必须是一条数据、一条数据的反序列化，类似如下：
import json
# 序列化数据
lst1 = [1, 2, 3]
lst2 = [4, 5, 6]
lst3 = [7, 8, 9]
# 序列化写入文件，每写入一条数据插一个换行
with open('test.json', 'w', encoding='UTF-8') as fp:
json.dump(lst1, fp)
fp.write('\n')
json.dump(lst2, fp)
fp.write('\n')
json.dump(lst3, fp)
# 读取文件反序列化（逐行读取数据，然后反序列化）
with open('test.json', 'r', encoding='UTF-8') as fp:
datum = fp.readlines()
print(len(datum)) # 3
for data in datum:
data = json.loads(data)
print(data) # [1, 2, 3]
# [4, 5, 6]
# [7, 8, 9]pickle和json的区别总结
json序列化后的数据为字符串，pickle序列化后的数据为字节流；
json支持八种数据类型(int、float、bool、str、list、tuple、dict、None)，pickle支持python的一切数据类型；
json一般用于多语言间的数据交流，pickle一般用于python之间数据交流；