(数据科学学习手札142)dill:Python中增强版的pickle
本文示例代码已上传至我的
Github
仓库https://github.com/CNFeffery/DataScienceStudyNotes
1 简介
大家好我是费老师,相信不少读者朋友们都在Python
中利用pickle
进行过序列化操作,而所谓的序列化,指的是将程序运行时在内存中产生的变量对象,转换为二进制类型的易存储可传输数据的过程,相反地,从序列化结果解析还原为Python
变量就叫做反序列化。
通常我们都是用标准库pickle
进行这项操作,但其功能单一,且针对很多常见的Python
对象如lambda
函数无法进行序列化。而今天费老师我要给大家介绍的库dill
就可以看作增强版的pickle
。
2 使用dill实现更丰富的序列化/反序列化操作
作为第三方库,我们使用pip install dill
完成安装后,就可以使用它来代替pickle
了:
2.1 基础使用
dill
的基础使用与pickle
一样,使用dump/dumps
进行序列化操作,load/loads
进行反序列化操作,下面是一些基本的例子,我们对一些常见的对象进行序列化/反序列化操作:
import dill
import numpy as np
demo_int = 999
demo_float = 0.99
demo_dict = {'a': 999}
demo_array = np.random.rand(2, 2)
# 序列化并写出到pkl文件
with open('./demo.pkl', 'wb') as d:
dill.dump(
[demo_int, demo_float, demo_dict, demo_array],
d
)
从写出的demo.pkl
文件中还原对象:
# 序列化并写出到pkl文件
with open('./demo.pkl', 'rb') as d:
restore_demo = dill.load(d)
restore_demo
2.2 增强功能
看完了dill
的基础用法,下面我们来介绍其相对于pickle
进行增强的特殊功能:
2.2.1 对lambda函数进行序列化
pickle
可以对常规的函数进行序列化,但针对lambda
函数则会报错,而使用dill
就可以正常序列化:
2.2.2 保存解释器的会话状态
dill
中另一项很实用的功能则是其支持将当前解释器的会话状态整个打包保存和还原,譬如下面的例子,利用dill.dump_session()
保存当前解释器会话状态,在另一个独立的py
脚本中再利用dill.load_session()
就可以一步到位全部还原:
2.2.3 从序列化结果中还原源码
dill
中另一个很强大的功能是其source
模块可以从序列化结果中还原对象的源码,这在序列化的对象为函数时非常实用(注意目前此功能不可以在ipykernel
中执行,因此下面的例子使用魔术命令直接执行外部py
脚本):
除此之外,dill
还有很多其他丰富的功能,感兴趣的读者朋友可以前往其官方文档(https://dill.readthedocs.io/en/latest/dill.html
)了解更多。
以上就是本文的全部内容,欢迎在评论区与我进行讨论~
相关文章
- 24岁非计算机专业工科妹子裸辞转行Python程序员,自学Python三个月,零基础如何系统学习python,从入门到精通?
- 35岁了转行python可以吗?什么样的人合适学习Python?
- 【2022】软件测试学习路线技术方向,python自动化测试
- 小白学数据 | 28张小抄表大放送:Python,R,大数据,机器学习
- 学习Python的第一节课(附安装教程)
- Python数据处理Tips机器学习中文数据8种常用处理方法
- Python 数据分析教程之在构建机器学习模型之前如何分析数据?(教程含源码)
- (数据科学学习手札26)随机森林分类器原理详解&Python与R实现
- (数据科学学习手札18)二次判别分析的原理简介&Python与R实现
- (数据科学学习手札16)K-modes聚类法的简介&Python与R的实现
- (数据科学学习手札02)Python与R在循环语句与条件语句上的异同
- Python学习---IO的异步[自定义异步IO]
- Mysql学习---Python操作Mysql 1231
- Python学习---函数的学习1209[all]
- Python学习---range/for/break/continue简单使用
- python进行机器学习(三)之模型选择与构建
- 学习笔记(52):Python实战编程-Radiobutton
- 学习笔记(36):Python网络编程&并发编程-IO模型介绍
- 学习笔记(15):Python网络编程&并发编程-进程理论
- Python入门学习笔记第五章——if条件句~~~