python-3.x - 用于数据预处理的 Pickle

Question

我正在阅读有关在 ml 模型上使用 pickle 的各种教程和文章，以便以后可以使用。但是我无法获得用于数据预处理的泡菜或类似的东西。我正在做预处理：

• 更改少数列/功能的数据类型。
• 特征工程。
• 热编码/虚拟变量

• 使用以下代码缩放数据

  从 sklearn.preprocessing 导入 StandardScaler

  sc = StandardScaler()
  
  X_train = sc.fit_transform(X_train)
  
  X_test = sc.transform(X_test)
  

现在，我想对我传递给预测的每个数据集执行此操作。在我从 pickle 加载 ML 模型之前，有什么方法可以像 pickle 一样加载数据预处理步骤。

请指导

标签： python-3.xpickle

Answer 1

我创建了一个函数并将其保存为一个独立的文件。然后在需要时调用该函数。

下面是我如何调用数据预处理函数的代码

from DataPreparationv3 import Data_Preprocess
Base_Data = pd.read_csv('Validate.csv')

DataReady = Data_Preprocess(Base_Data)

这解决了我的问题。

问候

苏迪尔