微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

通过 PCA 为测试集获取相同的特征转换失败

如何解决通过 PCA 为测试集获取相同的特征转换失败

在 ML 项目中,您首先将训练数据集和测试数据集分开,然后对训练数据集进行所有转换,以确保不会发生信息泄漏。更准确地说:

X_train,X_test,y_train,y_test = train_test_split(X,y,test_size=0.2,random_state=111) 

完成上述操作后,您将执行所有操作:

使用 X_train 和 y_train 进行过采样、欠采样尺度降维

示例:从 sklearn.preprocessing 导入 StandardScaler

sc = StandardScaler()
X_train = sc.fit_transform(X_train)
X_test = sc.transform(X_test)

pca = PCA(n_components = 0.95)
X_train = pca.fit_transform(X_train)
X_test = pca.transform(X_test)

我的印象是从 sklearn.decomposition import PCA 创建 PCA 对象并首先调用火车数据集:

pca = PCA(n_components = 0.95)
pca.fit_transform(X_train)

然后在测试集上

pca.transform(X_test)

是否会或应该为我提供与训练模型相同的尺寸,但不幸的是,当我尝试计算测试误差时 - 模型未见数据。我得到以下信息:

X has 39 features,but DecisionTreeClassifier is expecting 10 features as input

这对我来说真的很困惑,因为使用相同的 PCA 对象它应该将 X_test 转换为完全相同的维度。我在这里错过了什么?

测试误差的计算方法如下:

y_pred = tree_model.predict(X_test)
y_pred = tree_model.predict_proba(X_test)[:,1]

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。