经过训练的系统的核查

Question

我已经训练了一个系统，以便从一组场景中检测出一些特征。现在，该系统可以检测和分类的集合。如何验证该系统在现实世界中的工作方式？我应该使用什么数学工具？

Answer 1

您是否也用单独的测试集来验证数据集，以便查看它如何处理已知数据？

这个答案很好地说明了如何做到这一点：https://stats.stackexchange.com/questions/19048/what-is-the-difference-between-test-set-and-validation-set

这也是一个最佳实践，以确保您没有过适合的数据。最简单的方法是检查数据的准确性和用来训练数据的数据。如果它并不比测试数据好得多(这些数据永远不应该用于训练模型)，那么您就没有过度适应。

在此之后，如果您最终在系统中找到了正确的分类，我将将那里的准确性与您在培训和测试环境中所体验到的准确性进行比较，以确定其性能是否符合预期。