序列化:
序列化是指把内存里的数据类型转变成字符串,以使其能存储到硬盘或通过网络传输到远程,因为硬盘或网络传输时只能接受bytes.
反序列化:
把字符转成内存里的数据类型.
用于序列化的两个模块.他们的使用方法完全一样.
- json,用于字符串 和 python数据类型间进行转换
- pickle,用于python特有的类型 和 python的数据类型间进行转换
Json模块提供了四个功能:dumps、dump、loads、load
pickle模块提供了四个功能:dumps、dump、loads、load
为什么要序列化?
你打游戏过程中,打累了,停下来,关掉游戏、想过2天再玩,2天之后,游戏又从你上次停止的地方继续运行,你上次游戏的进度肯定保存在硬盘上了,是以何种形式呢?游戏过程中产生的很多临时数据是不规律的,可能在你关掉游戏时正好有10个列表,3个嵌套字典的数据集合在内存里,需要存下来?你如何存?把列表变成文件里的多行多列形式?那嵌套字典呢?根本没法存。所以,若是有种办法可以直接把内存数据存到硬盘上,下次程序再启动,再从硬盘上读回来,还是原来的格式的话,那是极好的。
常用方法:
1 import json,pickle 2 date = { 3 'name':{'name':'alex','age':22, 'salary':99999} 4 } 5 6 7 8 d = json.dumps(date) # 把date中的数据序列化.转成字符串 9 d2 = json.loads(d) # 把字符串反序列化成内存里的类型. 10 print(d2['name']) # 输出name的value值,{'age': 22, 'name': 'alex', 'salary': 99999}.说明反序列化成功了 11 print(type(d)) 12 f = open("test.json", "w") 13 json.dump(date,f) # 把date数据序列化并写入到一个文件对象中. 14 f = open("test.json", "r") # 打开要被反序列化的文件 15 date1 = json.load(f) # 把一个文件对象反序列化.可以从文件中读取 16 print(date1["name"]) 17 18 ''' 19 序列化,可以dump多次,但是不能load多次! 20 把数据类型转成字符串存到内存里的意义? 21 1.把你的内存数据通过网络共享给别人. 22 2.跨平台.定义了不同语言之间的交互规则. 23 24 25 ''' 26 27 28 pk = open("data.pkl","wb") # 写入方式是wb 29 # print(pickle.dumps(date)) # 序列化date中的数据,以bytes数据类型展现 30 pickle.dump(date,pk) 31 d = open('data.pkl', "rb") 32 d1 = pickle.load(d) # 反序列化data.pkl中的数据 33 print(d1) # {'name': {'name': 'alex', 'salary': 99999, 'age': 22}}
json和pickle的区别:
JSON:
优点:跨语言、体积小
缺点:只能支持int\str\list\tuple\dict
Pickle:
优点:专为python设计,支持python所有的数据类型
缺点:只能在python中使用,存储数据占空间大
shelve模块是一个简单的k,v将内存数据通过文件持久化的模块,可以持久化任何pickle可支持的python数据格式.
刚刚我讲了.json和pickle不能dump和load多次.那么不同的数据类型,我们就得要存到多个文件中.这样很麻烦.因此,python提供了一个shelve的模块.可以支持dump和load多次.
只能在python中使用.
1 import shelve 2 date = { 3 'name':{'name':'alex','age':22, 'salary':99999} 4 } 5 6 list = ["abc","bbc","cbc"] 7 8 9 f = shelve.open("shelve_test") 10 f["names"] = date 11 f["li"] = list 12 f['names'] = {'name': {'name': 'alex', 'age': 22, 'salary': 99}} # 只能通过这种方式修改.把99999改成了99 13 # 然后f支持被持久化的数据类型的各种操作(这里的2个数据类型是字典和列表,所以f就支持字典和列表的增删改查
一般在python里 shelve可以代替pickle