交叉验证模型选择

Question

我对我的数据做了10倍的简历，并从结果中选择了我的模型复杂性。现在，由于我的复杂性，我将有10个不同的模型。我应该把这些模型的平均值作为我的测试，还是应该只是在我们的简历数据上拟合我们选定的复杂性模型，然后再进行测试？

Answer 1

根据您的最佳复杂度(或参数)对完整的培训数据进行重新培训。然后，您可以在未触及的测试数据集上测试模型并报告您的错误度量。