AzureML: ResolvePackageNotFound azureml

Question

我的AML管道中有一个基本的ScriptStep，它只是试图读取一个附加的数据集。当我执行这个简单的示例时，驱动程序日志中的以下内容会导致管道失败：

ImportError: azureml没有安装。数据集不能在没有azureml-数据代表的情况下使用。请确保azureml-数据恢复保险丝，熊猫是通过指定它在conda依赖项中安装的。熊猫是可选的，只有当你打算从数据集中创建一个熊猫DataFrame时，才应该安装。

然后我修改了我的步骤以包含conda包，但是驱动程序在"ResolvePackageNotFound: azureml“中失败了。可以访问整个日志文件这里。

# create a new runconfig object
run_config = RunConfiguration()
run_config.environment.docker.enabled = True
run_config.environment.docker.base_image = DEFAULT_CPU_IMAGE
run_config.environment.python.user_managed_dependencies = False
run_config.environment.python.conda_dependencies = CondaDependencies.create(conda_packages=['azureml-dataprep[pandas,fuse]'])

source_directory = './read-step'
print('Source directory for the step is {}.'.format(os.path.realpath(source_directory)))
step2 = PythonScriptStep(name="read_step",
                         script_name="Read.py", 
                         arguments=["--dataFilePath", dataset.as_named_input('local_ds').as_mount() ],
                         compute_target=aml_compute, 
                         source_directory=source_directory,
                         runconfig=run_config,
                         allow_reuse=False)

我已经没有想法了，希望能在这里得到任何帮助！

Answer 1

azureml-sdk在conda上不可用，您需要用pip安装它。

myenv = Environment(name="myenv")
conda_dep = CondaDependencies().add_pip_package("azureml-dataprep[pandas,fuse]")
myenv.python.conda_dependencies=conda_dep
run_config.environment = myenv

有关此错误的更多信息，logs选项卡有一个名为20_image_build_log.txt的日志，该日志名为Docker。它包含conda未能找到azureml-dataprep的错误。

编辑：

很快，您就不必再指定这个依赖项了。Azure Data4ML团队表示，azureml-dataprep[pandas,fuse]是作为azureml-defaults的依赖项添加的，azureml-defaults在所有映像上都会自动安装。