来自ImageNet的测试数据

Question

这里's描述了ILSVRC 2016 of ImageNet的数据使用情况。

Data          Image        Label    Changed    Release_Time
-----------------------------------------------------------------
training      1,200,000    1,000    no         always public  
validation       50,000    1,000    some       upon registration
test            100,000        0    some       final evaluation

我的问题是关于test data的具体问题。它是从ILSVRC 2012以来的同一组15万张图片中选择的，尽管是随机的吗？如果是这样的话，大多数test data已经在挑战的最后评估阶段公布了，结果如何才能保持足够的公平？

Answer 1

自2012年ILSVRC以来，它拥有相同的图像。测试集图像从未发布过。