老生常谈Python序列化和反序列化

发布时间 - 2026-01-11 02:05:10    点击率:

通过将对象序列化可以将其存储在变量或者文件中,可以保存当时对象的状态,实现其生命周期的延长。并且需要时可以再次将这个对象读取出来。Python中有几个常用模块可实现这一功能。

pickle模块

存储在变量中

dumps(obj)返回存入的字节

dic = {'age': 23, 'job': 'student'}
byte_data = pickle.dumps(dic)
# out -> b'\x80\x03}q\x00(X\x03\x00\x00\...'
print(byte_data)

读取数据

数据以字节保存在了byte_data变量中,需要再次使用的时候使用loads函数就行了。

obj = pickle.loads(byte_data)
print(obj)

存储在文件中

也可以存在文件中,使得对象持久化。使用的是dump和load函数,注意和上面的区别,少了s。由于pickle写入的是二进制数据,所以打开方式需要以wb和rb的模式。

# 序列化
with open('abc.pkl', 'wb') as f:
  dic = {'age': 23, 'job': 'student'}
  pickle.dump(dic, f)
# 反序列化
with open('abc.pkl', 'rb') as f:
  aa = pickle.load(f)
  print(aa)
  print(type(aa)) # <class 'dict'>

序列化用户自定义对象

假如我写了个类叫做Person

class Person:
  def __init__(self, name, age, job):
    self.name = name
    self.age = age
    self.job = job

  def work(self):
    print(self.name, 'is working...')

pickle当然也能写入,不仅可以写入类本身,也能写入它的一个实例。

# 将实例存储在变量中,当然也能存在文件中
a_person = Person('abc', 22, 'waiter')
person_abc = pickle.dumps(a_person)
p = pickle.loads(person_abc)
p.work()
# 将类本身存储在变量中,loads的时候返回类本身,而非它的一个实例
class_Person = pickle.dumps(Person)
Person = pickle.loads(class_Person)
p = Person('Bob', 23, 'Student')
p.work()

# 下面这个例子演示的就是将类存储在文件中
# 序列化
with open('person.pkl', 'wb') as f:
  pickle.dump(Person, f)
# 反序列化
with open('person.pkl', 'rb') as f:
  Person = pickle.load(f)
  aa = Person('gg', 23, '6')
  aa.work()

json模块

pickle可以很方便地序列化所有对象。不过json作为更为标准的格式,具有更好的可读性(pickle是二进制数据)和跨平台性。是个不错的选择。

json使用的四个函数名和pickle一致。

序列化为字符串

dic = {'age': 23, 'job': 'student'}
dic_str = json.dumps(dic)
print(type(dic_str), dic_str)
# out: <class 'str'> {"age": 23, "job": "student"}

dic_obj = json.loads(dic_str)
print(type(dic_obj), dic_obj)
# out: <class 'dict'> {'age': 23, 'job': 'student'}

可以看到,dumps函数将对象转换成了字符串。loads函数又将其恢复成字典。

存储为json文件

也可以存储在json文件中

dic = {'age': 23, 'job': 'student'}
with open('abc.json', 'w', encoding='utf-8') as f:
  json.dump(dic, f)

with open('abc.json', encoding='utf-8') as f:
  obj = json.load(f)
  print(obj)

存储自定义对象

还是上面的Person对象。如果直接序列化会报错

aa = Person('Bob', 23, 'Student')
with open('abc.json', 'w', encoding='utf-8') as f:
  json.dump(aa, f) # 报错

Object of type 'Person' is not JSON serializable此时dump函数里传一个参default就可以了,这个参数接受一个函数,这个函数可以将对象转换为字典。

写一个就是了

def person2dict(person):
  return {'name': person.name,
      'age': person.age,
      'job': person.job}

这样返回的就是一个字典了,对象实例有个方法可以简化这一过程。直接调用实例的__dict__。例如

print(aa.__dict) # {'name': 'Bob', 'age': 23, 'job': 'Student'}

很方便。

同时在读取的时候load出来的是一个字典,再转回对象就可,同样需要一个object_hook参数,该参数接收一个函数,用于将字典转为对象。

def dict2person(dic):
  return Person(dic['name'], dic['age'], dic['job'])

于是完整的程序应该写成下面这样

with open('abc.json', 'w', encoding='utf-8') as f:
  json.dump(aa, f, default=person2dict)

with open('abc.json', encoding='utf-8') as f:
  obj = json.load(f, object_hook=dict2person)
  print(obj.name, obj.age, obj.job)
  obj.work()

由于可以使用__dict__代替person2dict函数,再使用lambda函数简化。

with open('abc.json', 'w', encoding='utf-8') as f:
  json.dump(aa, f, default=lambda obj: obj.__dict__)

以上是存储到文件,存储到变量也是类似操作。

不过就我现在所学,不知道如何像pickle一样方便的将我们自定义的类本身使用json序列化,或许要用到其他扩展函数。以后用到了再说。

shelve模块

还有一个模块,不太常用,通常使用一个open就好。shelve以键值对的形式存储数据。

with shelve.open('aa') as f:
  f['person'] = {'age': 23, 'job': 'student'}
  f['person']['age'] = 44 # 这里试图改变原来的年龄23
  f['numbers'] = [i for i in range(10)]

with shelve.open('aa') as f:
  person = f['person']
  print(person) # {'age': 23, 'job': 'student'}
  nums = f['numbers']
  print(nums) # [0, 1, 2, 3, 4, 5, 6, 7, 8, 9]

文件不要有后缀名,在windows下会生成aa.bak, aa.dat, aa.dir三个文件(有点多)。其中bak和dir文件是可以查看的(貌似两个文件内容一样)在下面这个例子中生成这样的数据。

'person', (0, 44)
'numbers', (512, 28)

允许写回--writeback

有个细节,我们读取键person时候,发现age还是23岁,f['person']['age'] = 44后并没有变成44。下面的写法

with shelve.open('aa', writeback=True) as f:
  dic = {'age': 23, 'job': 'student'}
  f['person'] = dic
  dic['age'] = 44
  f['person'] = dic

相当于赋值了两次,这种方法是可以改变值的。

默认情况下直接使用f['person']改变其中的值之后,不会更新已存储的值,也就是没有把更新写回到文件,即使是文件被close后。如果有此需要,在open函数中添加一个参数writeback=True。再次运行下看看年龄就被改变了。

写入自定义对象

依然使用上面的Person对象

with shelve.open('aa') as f:
  f['class'] = Person
  
# 写入类本身
with shelve.open('aa') as f:
  Person = f['class']
  a = Person('Bob', 23, 'Student')
  a.work()

上面的例子说明shelve也可以序列化类本身。当然序列化实例肯定可以。

with shelve.open('aa') as f:
  a = Person('God', 100, 'watch')
  f['class'] = a

with shelve.open('aa') as f:
  god = f['class']
  god.work()

注意,由于我们使用with open打开,故不用写close语句,此模块是有close函数的,如果不是with方法打开的一定要记得主动close。

以上这篇老生常谈Python序列化和反序列化就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持。


# 序列化和反序列化  # Python使用protobuf序列化和反序列化的实现  # Python使用pickle进行序列化和反序列化的示例代码  # Python 序列化和反序列化库 MarshMallow 的用法实例代码  # Python3.5 Json与pickle实现数据序列化与反序列化操作示例  # Python Json序列化与反序列化的示例  # Python实现JSON反序列化类对象的示例  # 详解Python中的序列化与反序列化的使用  # python3序列化与反序列化用法实例  # Python序列化与反序列化相关知识总结  # 序列化  # 的是  # 自定义  # 也能  # 这一  # 有个  # 给大家  # 报错  # 很方便  # 一个函数  # 几个  # 是个  # 二进制数  # 成了  # 是有  # 不太  # 老生常谈  # 就好  # 要有  # 中有 


相关栏目: 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251811 】 【 AI营销90571


相关推荐: Android利用动画实现背景逐渐变暗  如何快速使用云服务器搭建个人网站?  详解vue.js组件化开发实践  CSS3怎么给轮播图加过渡动画_transition加transform实现【技巧】  高端网站建设与定制开发一站式解决方案 中企动力  Edge浏览器提示“由你的组织管理”怎么解决_去除浏览器托管提示【修复】  如何在企业微信快速生成手机电脑官网?  电商网站制作价格怎么算,网上拍卖流程以及规则?  Laravel如何处理表单验证?(Requests代码示例)  如何在 Pandas 中基于一列条件计算另一列的分组均值  HTML透明颜色代码怎么让下拉菜单透明_下拉菜单透明背景指南【技巧】  西安专业网站制作公司有哪些,陕西省建行官方网站?  如何用y主机助手快速搭建网站?  html5怎么画眼睛_HT5用Canvas或SVG画眼球瞳孔加JS控制动态【绘制】  如何选择可靠的免备案建站服务器?  如何安全更换建站之星模板并保留数据?  香港网站服务器数量如何影响SEO优化效果?  Edge浏览器怎么启用睡眠标签页_节省电脑内存占用优化技巧  Laravel怎么为数据库表字段添加索引以优化查询  ChatGPT 4.0官网入口地址 ChatGPT在线体验官网  网站制作软件免费下载安装,有哪些免费下载的软件网站?  Laravel如何处理JSON字段_Eloquent原生JSON字段类型操作教程  Laravel的辅助函数有哪些_Laravel常用Helpers函数提高开发效率  如何用JavaScript实现文本编辑器_光标和选区怎么处理  php485函数参数是什么意思_php485各参数详细说明【介绍】  如何在建站主机中优化服务器配置?  javascript中对象的定义、使用以及对象和原型链操作小结  JavaScript中的标签模板是什么_它如何扩展字符串功能  HTML 中如何正确使用模板变量为元素的 name 属性赋值  如何在万网ECS上快速搭建专属网站?  Win11摄像头无法使用怎么办_Win11相机隐私权限开启教程【详解】  详解Android图表 MPAndroidChart折线图  Laravel如何配置任务调度?(Cron Job示例)  如何获取上海专业网站定制建站电话?  Android自定义控件实现温度旋转按钮效果  如何彻底删除建站之星生成的Banner?  高防服务器租用首荐平台,企业级优惠套餐快速部署  Laravel如何实现数据库事务?(DB Facade示例)  香港服务器建站指南:免备案优势与SEO优化技巧全解析  如何用5美元大硬盘VPS安全高效搭建个人网站?  使用PHP下载CSS文件中的所有图片【几行代码即可实现】  如何在云主机快速搭建网站站点?  如何用AI帮你把自己的生活经历写成一个有趣的故事?  微信小程序 canvas开发实例及注意事项  实例解析Array和String方法  Laravel如何使用Socialite实现第三方登录?(微信/GitHub示例)  java ZXing生成二维码及条码实例分享  nginx修改上传文件大小限制的方法  Laravel如何配置Horizon来管理队列?(安装和使用)  Laravel怎么解决跨域问题_Laravel配置CORS跨域访问