machine-learning - 处理 SVM 中缺失的属性

Question

我有一个包含 2500 条记录的数据集。每条记录有 100 个属性。我面临的问题是，其中许多记录缺少一个(或多个)属性值。由于这样的记录数量很大(大约800条)，我不能忽视这些记录。我的所有属性都是数字。我的目标属性是绝对的。它有 6 个可能的类别。我计划使用 SVM 分类器进行训练。

我应该使用什么方法来处理缺失的属性值？

此外，我的测试数据也包含缺失的属性。如何处理测试数据中的缺失值？

Answer 1

由于 2500 个数据集中的 800 个实例相当高，因此删除它们可能确实不是最佳选择。

由于您正在处理数字属性，因此常见的技术是找到一些可用于缺失数据的通用值。通常出于这些目的选择均值。

sklearn 提供了一个预处理器，可以在 sklearn.preprocessing.Imputer 中执行此操作

一个例子:

from sklearn.preprocessing import Imputer
imp = Imputer(missing_values='NaN', strategy='mean', axis=0)
imp.fit([[1, 2], [np.nan, 3], [7, 6]])

当然，最好的解决方案是请领域专家填写缺失的值，但这通常是不可能的。