彩虹然

rainbow-ran

Python3.7之pickle&json模块

一、什么叫序列化

序列化是将对象状态转换为可保持或传输的格式的过程。与序列化相对的是反序列化,它将流转换为对象。这两个过程结合起来,可以轻松地存储和传输数据。

二、序列化pickle模块

pickle模块是做什么用的

用来存取结构化数据。用于python特有的类型和python的数据类型间进行转换。

pickle可以存储的数据类型

①所有python支持的原生类型:布尔值,整数,浮点数,复数,字符串,字节,None;
②由任何原生类型组成的列表,元组,字典和集合;
③函数,类,类的实例。

pickle模块中常用的方法

pickle提供四个功能:dumps,dump,loads,load

①pickle.dumps(obj[, protocol])

函数的功能:将obj对象序列化为string形式,而不是存入文件中(以字节对象形式返回封装的对象,不需要写入文件中)。

参数讲解:

obj:想要序列化的obj对象。

protocal:如果该项省略,则默认为0。如果为负值或HIGHEST_PROTOCOL,则使用最高的协议版本。

# dumps功能
# dumps 将数据通过特殊的形式转换为只有python语言认识的字符串
import pickle
info = {
    'name': 'Vivian',
    'age': 20,
    'height': 157
}

data = pickle.dumps(info)  # dumps会把数据变成bytes形式
print(data)

# 输出
# b'\x80\x03}q\x00(X\x04\x00\x00\x00nameq\x01X\x06\x00\x00\x00Vivianq\x02X\x03\x00\x00\x00ageq\x03K\x14X\x06\x00\x00\x00heightq\x04K\x9du.'

②pickle.dump(obj, file, protocol=None,)

函数的功能:将obj对象序列化存入已经打开的file中。

参数讲解:

必填参数obj表示将要封装的对象

必填参数file表示obj要写入的文件对象,file必须以二进制可写模式打开,即“wb”

注:一个字典a = {'name':'Tom','age':22},用pickle.dump存到本地文件,所存数据的结构就是字典,而普通的file.write写入文件的是字符串。

# dump功能
# dump 将数据通过特殊的形式转换为只有python语言认识的字符串,并写入文件
import pickle
info = {
    'name': 'Vivian',
    'age': 20,
    'height': 157
}

with open('information.pkl', 'wb') as f:
    pickle.dump(info, f)

③pickle.loads(string)

函数的功能:反序列化。从string中读出序列化前的obj对象(从字节对象中读取被封装的对象,并返回)。

参数讲解:

string:文件名称。

# loads功能
# loads  将pickle数据转换为python的数据结构
import pickle
info = {
    'name': 'Vivian',
    'age': 20,
    'height': 157
}

data1 = pickle.dumps(info)
print(data1)
data2 = pickle.loads(data1)
print(data2)

# 输出
# b'\x80\x03}q\x00(X\x04\x00\x00\x00nameq\x01X\x06\x00\x00\x00Vivianq\x02X\x03\x00\x00\x00ageq\x03K\x14X\x06\x00\x00\x00heightq\x04K\x9du.'
# {'name': 'Vivian', 'age': 20, 'height': 157}

④pickle.load(file)

函数的功能:load对象反序列化,从文件读取数据,将file中的对象序列化读出。

参数讲解:

file:文件名称。必填参数file必须以二进制可读模式打开,即“rb”,其他都为可选参数。

# load功能
# load 从数据文件中读取数据,并转换为python的数据结构
import pickle
with open('information.pkl', 'rb') as f:
    print(pickle.load(f))
    
# 输出
# {'name': 'Vivian', 'age': 20, 'height': 157}

三、序列化模块json

json模块是做什么用的

用来存取结构化数据。用于字符串和Python数据类型间进行转换。

json可以存储的数据类型

只能支持int\str\list\tuple\dict

json模块中常用的方法

json提供四个功能:dumps,dump,loads,load

①字典转成json串

文件里只能写字符串,但可以把字典转成json串,json串是字符串,可以存到文件里。

# json.dumps 将数据通过特殊的形式转换位所有程序语言都认识的字符串
import json
info = {
    'name': 'Vivian',
    'age': 20,
    'height': 157
}
j_str = json.dumps(info)  # 注意json dumps生成的是字符串,不是bytes
print(j_str)
print(type(j_str))

# 输出
# {"name": "Vivian", "age": 20, "height": 157}
# <class 'str'>
# 使用.dump()方法前,要先打开文件,再写入
with open('massage.json', 'w') as f:
    json.dump(info, f)

②json串转成字典

# json.loads 用于解码 JSON 数据。该函数返回 Python 字段的数据类型
print(json.loads(j_str))
print(type(json.loads(j_str)))

# 输出
# {'name': 'Vivian', 'age': 20, 'height': 157}
# <class 'dict'>
with open('massage.json') as f:
    data = json.load(f)
    print(data)
	print(type(data))

# {"name": "Vivian", "age": 20, "height": 157}
# <class 'dict'>

四、json vs pickle

Json:

优点:跨语言(不同语言间的数据传递可用json交接)、体积小

缺点:只能支持int\str\list\tuple\dict

Pickle:

优点:专为python设计,支持python所有的数据类型

缺点:只能在python中使用,存储数据占空间大

五、load vs loads

load和loads都是实现“反序列化”,区别在于:

loads针对内存对象

即将Python内置数据序列化为字串。如使用json.dumps序列化的对象d_json=json.dumps({'a':1, 'b':2}),在这里d_json是一个字串'{"b": 2, "a": 1}'
d=json.loads(d_json) #{ b": 2, "a": 1},使用load重新反序列化为dict

load针对文件句柄

如本地有一个json文件a.json则可以d=json.load(open('a.json'))

相应的,dump就是将内置类型序列化为json对象后写入文件

posted @ 2020-01-16 16:23  彩虹然  阅读(1195)  评论(0编辑  收藏  举报