Google Cloud ML:如何执行超参数调优作业的纯网格搜索

Question

Google Cloud ML使用贝叶斯优化来缓解维度的诅咒。在特定情况下，我有一些超参数调优作业，在这些作业中，我希望对超参数调优作业中的超参数网格执行详尽的搜索。我该怎么做呢？

我执行纯网格搜索的动机是:我观察到，针对完全离散类型的超参数的超参数调优作业多次评估相同的超参数组合，这是我不想要的。我怀疑这与贝叶斯优化的使用有关。这就是为什么我想对这些情况执行纯网格搜索的原因。

Answer 1

目前还没有可用于强制网格搜索的参数。

目前最好的解决方法可能是提交多个作业，并为每个作业设置特定的超参数。这可以在不更改代码的情况下完成，因为您可以将值指定为用户命令行参数。您应该能够在循环中提交所有作业，如果有太多作业无法同时运行，Google Cloud ML将对它们进行排队。缺点是你必须找出哪一个是最好的。