ml引擎HP优化能在本地运行吗？

Question

我试图使用本地服务器上的ml引擎为我的模型优化HPs。在我的例子中，模型只训练一次，但没有进行HP试验。这是一个配置问题，还是在本地模式中不支持HP优化？

我的地方指挥部：

gcloud ml-引擎本地列车-包装-路径$PWD -模块名称example.train -配置示例/hpconfig.yaml-顺1 16 -顺2 2

我的配置文件：

trainingInput:
  workerCount: 1
  hyperparameters:
    goal: MINIMIZE
    hyperparameterMetricTag: val_loss
    maxTrials: 10
    maxParallelTrials: 1
    enableTrialEarlyStopping: True
    params:
    - parameterName: param1
      type: INTEGER
      minValue: 4
      maxValue: 128
      scaleType: UNIT_LINEAR_SCALE
    - parameterName: param2
      type: INTEGER
      minValue: 1
      maxValue: 4
      scaleType: UNIT_LINEAR_SCALE

Answer 1

不幸的是，HP调优不能在本地模式下运行。我推荐这样的工作流：

1. 使用小数据等在本地运行，以确保一切正常工作(我建议使用GCS路径)。
2. 在云(单个作业)上运行一个小测试，以确保依赖项是正确的，数据文件正确地指向GCS而不是本地，等等。
3. 运行HP调优作业。

一旦1和2起作用，3一般也会起作用。

另外，作为一个副词。Kubeflow支持卡蒂布从任何kubernetes部署中运行HP调优作业，包括Minikube (用于本地开发)。