Day 4-5 序列化 json & pickle &shelve

时间:2022-02-19 09:09:26

序列化:

序列化是指把内存里的数据类型转变成字符串,以使其能存储到硬盘或通过网络传输到远程,因为硬盘或网络传输时只能接受bytes.

反序列化:

把字符转成内存里的数据类型.

用于序列化的两个模块.他们的使用方法完全一样.

  • json,用于字符串 和 python数据类型间进行转换
  • pickle,用于python特有的类型 和 python的数据类型间进行转换

Json模块提供了四个功能:dumps、dump、loads、load

pickle模块提供了四个功能:dumps、dump、loads、load

为什么要序列化?

你打游戏过程中,打累了,停下来,关掉游戏、想过2天再玩,2天之后,游戏又从你上次停止的地方继续运行,你上次游戏的进度肯定保存在硬盘上了,是以何种形式呢?游戏过程中产生的很多临时数据是不规律的,可能在你关掉游戏时正好有10个列表,3个嵌套字典的数据集合在内存里,需要存下来?你如何存?把列表变成文件里的多行多列形式?那嵌套字典呢?根本没法存。所以,若是有种办法可以直接把内存数据存到硬盘上,下次程序再启动,再从硬盘上读回来,还是原来的格式的话,那是极好的。

常用方法:

 import json,pickle
date = {
'name':{'name':'alex','age':22, 'salary':99999}
} d = json.dumps(date) # 把date中的数据序列化.转成字符串
d2 = json.loads(d) # 把字符串反序列化成内存里的类型.
print(d2['name']) # 输出name的value值,{'age': 22, 'name': 'alex', 'salary': 99999}.说明反序列化成功了
print(type(d))
f = open("test.json", "w")
json.dump(date,f) # 把date数据序列化并写入到一个文件对象中.
f = open("test.json", "r") # 打开要被反序列化的文件
date1 = json.load(f) # 把一个文件对象反序列化.可以从文件中读取
print(date1["name"]) '''
序列化,可以dump多次,但是不能load多次!
把数据类型转成字符串存到内存里的意义?
1.把你的内存数据通过网络共享给别人.
2.跨平台.定义了不同语言之间的交互规则. ''' pk = open("data.pkl","wb") # 写入方式是wb
# print(pickle.dumps(date)) # 序列化date中的数据,以bytes数据类型展现
pickle.dump(date,pk)
d = open('data.pkl', "rb")
d1 = pickle.load(d) # 反序列化data.pkl中的数据
print(d1) # {'name': {'name': 'alex', 'salary': 99999, 'age': 22}}

json和pickle的区别:

JSON:

优点:跨语言、体积小

缺点:只能支持int\str\list\tuple\dict

Pickle:

优点:专为python设计,支持python所有的数据类型

缺点:只能在python中使用,存储数据占空间大

shelve模块是一个简单的k,v将内存数据通过文件持久化的模块,可以持久化任何pickle可支持的python数据格式.

刚刚我讲了.json和pickle不能dump和load多次.那么不同的数据类型,我们就得要存到多个文件中.这样很麻烦.因此,python提供了一个shelve的模块.可以支持dump和load多次.

只能在python中使用.

 import shelve
date = {
'name':{'name':'alex','age':22, 'salary':99999}
} list = ["abc","bbc","cbc"] f = shelve.open("shelve_test")
f["names"] = date
f["li"] = list
f['names'] = {'name': {'name': 'alex', 'age': 22, 'salary': 99}} # 只能通过这种方式修改.把99999改成了99
# 然后f支持被持久化的数据类型的各种操作(这里的2个数据类型是字典和列表,所以f就支持字典和列表的增删改查

一般在python里 shelve可以代替pickle