目录

1.pkl文件格式简介：

1.1 什么是 pkl 文件？ 

1.2 pkl文件和pmml文件的简单区别

1.3  pkl 文件的优点

1.4 使用场景

2.使用 Python 操作 pkl 文件

2.1 对象序列化为 pkl 文件（将数据保存为pkl文件）

2.2 从 pkl 文件中反序列化对象（打开读取pkl文件）

 3. pkl文件的保存，加载，使用详解

3.1 joblib包和pickle包保存加载pkl区别

3.2 使用joblib包保存加载pkl模型文件

3.2.1 joblib保存pkl模型文件joblib.dump()

3.2.2 joblib加载pkl模型文件joblib.load() 

3.3 使用pickle包保存加载pkl模型文件

3.3.1 pickle保存pkl模型文件pickle.dump()

3.3.2 pickle加载pkl模型文件pickle.load()

 4.pkl模型文件加载后预测结果prdict_proba()

5.实例演示—将数据集保存为pkl文件 

5.1 字典类型的数据

5.2 列表类型的数据

6.读取.pkl文件，转换为csv

7.如何通过github上拿到的pkl文件找到制作该文件的方法？

pkl 文件使用的注意事项

学习参考文章：

        在 Python 编程中，我们通常需要将数据保存到文件中以便在以后的执行中使用。 pkl 文件是一种常见的文件格式，它可以保存 Python 对象的状态，并且可以在需要时将其恢复到内存中，pkl 文件是以二进制格式保存的。 pkl 文件提供了一种简单而有效的方法来序列化和反序列化 Python 对象，使其易于存储、传输和共享。

pkl 文件是指使用 Python 的 pickle 模块生成的二进制文件，用于将 Python 对象序列化到磁盘上。序列化是指将对象转换为字节流的过程，以便将其保存到文件中。 pkl 文件包含了对象的状态信息，包括对象的数据和方法。

稍微总结一下，pkl文件，即

1）python中有一种存储方式，可以存储为.pkl文件。

2）该存储方式，可以将python项目过程中用到的一些暂时变量、或者需要提取、暂存的字符串、列表、字典等数据保存起来。

3）保存方式就是保存到创建的.pkl文件里面。

4）然后需要使用的时候再 open，load。

在学习pkl文件之前，我们再来了解另外一种文件格式： pmml文件。

python机器学习模型训练完之后可以保存为pkl文件，也可以保存为pmml文件。

那么什么时候保存为pkl文件，什么时候保存为pmml文件呢？

专业点说：模型需要跨平台使用，交由技术部门用java上线运行，需要使用pmml文件。

简单点说：给python开发用就保存为pkl文件，给java开发用就保存为pmml文件。

使用 pkl 文件有以下几个优点：

（1）简单易用： pickle 模块提供了简单的接口，使得序列化和反序列化 Python 对象变得非常容易。 （2）数据完整性： pkl 文件保存了对象的完整状态，包括对象的数据和方法，确保了数据的完整性。 （3）跨平台兼容性：由于 pkl 文件是以二进制格式保存的，因此可以在不同的操作系统和 Python 版本之间进行交互。 （4）数据压缩： pickle 模块支持数据压缩，可以减小文件大小并节省存储空间。  

1）保存模型：在机器学习和深度学习中，我们可以使用 pkl 文件保存训练好的模型，以便在需要时加载和使用。 2）缓存数据：当我们需要频繁地读取和处理数据时，可以将数据序列化为 pkl 文件，以便提高读取和处理的速度。 3）传输数据： pkl 文件可以用于将数据传输到不同的系统和环境中，确保数据的完整性和一致性。

要将 Python 对象序列化为 pkl 文件，我们需要使用 pickle 模块的 dump() 函数。 以下是一个将 Python 对象保存为 pkl 文件的示例代码：

如此便实现了将对象保存到pkl文件中：

 上述代码将一个字典对象保存到名为 data.pkl 的 pkl 文件中。 

要从 pkl 文件中反序列化对象，我们需要使用 pickle 模块的 load() 函数。

以下是一个从 pkl 文件中加载 Python 对象的示例代码：

 上述代码将从名为 data.pkl 的 pkl 文件中加载对象，并将其打印到控制台。

再来一个例子：

 如何打开pkl文件？ 

pycharm中输出结果： 

 机器学习模型保存为pkl文件有两种方式：可以使用joblib包，也可以使用pickle包。

joblib包是由scikit-learn外带的，常用于保存机器学习模型。对于大数据而言，joblib比pickle更加高效。需要注意的是实际使用时用joblib包和pickle包时不要混用！！！

用joblib包保存的模型，最好还是用joblib包加载。因为用joblie包保存模型，加载时却用pickle包会报错：invalid load key, '\x00'。所以保存加载模型的时候建议使用同一个包，不要混着用。

接下来就用鸢尾花数据集，具体演示一下使用joblib包和pickle包保存加载pkl模型，以及用加载的pkl模型文件来预测结果。

joblib.dump()参数说明：

参数model：要保存的模型（fit训练后的）。

参数filename：要保存的模型路径和名称。

joblib.load()参数说明：

参数filename：要加载的模型路径和名称。

pickle.dump()参数说明：

参数model：要保存的模型（fit训练后的）。

参数file：简单点说就是要保存的模型路径和名称外加个open。

pickle.load()参数说明：

参数file：简单点说就是要加载的模型路径和名称外加个open。

pkl模型文件加载后的模型，和建模时训练后的模型是一模一样的，所以建模时怎么预测，加载后就怎么预测。（注：pmml模型文件加载后的模型，预测结果的方式是不同的。）

predict_proba预测结果时，不需要输入变量的名称，但输入的变量顺序必须和模型训练时相同。对比以下两种方式：

结果：

结果：

当然，若是要研究pkl中的数据信息，也可以先打印该数据的类型，然后再针对性地查看信息：

数据集原来的编码encoding格式未知，只有一个.pkl文件。用.txt格式查看数据不方便时，可以将.pkl转换为.csv文件来看，同时也方便后续行列处理。 

注意：object =pkl.load(f,encoding='latin1')容易在encoding处报错，可以根据实际pkl的编码规则更改为encoding='utf-8'。完成文件类型转换之后，查看csv文件每一行的大小 。

 这样，就可以将pkl文件中的数据转换为scv的格式，就更加有利于研究我们要复现的pkl数据信息了：

这个问题是我在复现论文代码时遇到的，也是为了迎合论文中的项目代码吧，最省力的方法就是把自己的数据集预处理成和人家代码中的数据集格式一样。

所以经过如上学习，方法就是：

1）先加载论文代码的pkl文件，

2）然后打印保存的pkl中的数据类型，eg：print(type(xxx))

3）继续打印需要知道的数据信息

4）最后根据得到的数据信息，将自己的数据集预处理成一样的格式，再通过pickle.dump（）保存为pkl格式文件即可。

 安全性问题：由于 pkl 文件可以执行任意代码，因此在加载不受信任的 pkl 文件时存在安全风险。为了确保安全性，我们应该只加载信任的 pkl 文件，并谨慎处理从外部来源获取的 pkl 文件。

版本兼容性问题：pickle 模块的版本兼容性可能会受到影响。如果使用不同版本的 Python 或 pickle 模块进行序列化和反序列化，可能会导致兼容性问题。为了避免这个问题，建议在不同版本之间使用最低公共版本的 pickle 模块。

引入如下说明更清楚：

Python 利用pickle库查看pkl文件实例演示，pkl是什么类型的文件？怎么来打开它?_挣扎的蓝藻的博客-CSDN博客

python机器学习模型pkl和pmml文件的保存加载使用 - 知乎 (zhihu.com)

(4条消息) 把数据写入pkl文件，读取pkl文件_怎么读取pkl文件_梅花14的博客-CSDN博客