Azure ML 无法创建 conda 环境（退出代码：-15）

Question

当我尝试在笔记本中运行this notebook 中定义的实验时，我在创建 conda env 时遇到了错误。执行以下单元格时发生错误：

from azureml.core import Experiment, ScriptRunConfig, Environment
from azureml.core.conda_dependencies import CondaDependencies
from azureml.widgets import RunDetails


# Create a Python environment for the experiment
sklearn_env = Environment("sklearn-env")

# Ensure the required packages are installed (we need scikit-learn, Azure ML defaults, and Azure ML dataprep)
packages = CondaDependencies.create(conda_packages=['scikit-learn','pip'],
                                    pip_packages=['azureml-defaults','azureml-dataprep[pandas]'])
sklearn_env.python.conda_dependencies = packages

# Get the training dataset
diabetes_ds = ws.datasets.get("diabetes dataset")

# Create a script config
script_config = ScriptRunConfig(source_directory=experiment_folder,
                              script='diabetes_training.py',
                              arguments = ['--regularization', 0.1, # Regularizaton rate parameter
                                           '--input-data', diabetes_ds.as_named_input('training_data')], # Reference to dataset
                              environment=sklearn_env)

# submit the experiment
experiment_name = 'mslearn-train-diabetes'
experiment = Experiment(workspace=ws, name=experiment_name)
run = experiment.submit(config=script_config)
RunDetails(run).show()
run.wait_for_completion() 

每次运行此程序时，我总是面临创建 conda env 的问题，如下所示：

Creating conda environment...
Running: ['conda', 'env', 'create', '-p', '/home/azureuser/.azureml/envs/azureml_000000000000', '-f', 'azureml-environment-setup/mutated_conda_dependencies.yml']
Collecting package metadata (repodata.json): ...working... done
Solving environment: ...working... done
Preparing transaction: ...working... done
Verifying transaction: ...working... done
Executing transaction: ...working... done

Installing pip dependencies: ...working... 

Attempting to clean up partially built conda environment: /home/azureuser/.azureml/envs/azureml_000000000000
Remove all packages in environment /home/azureuser/.azureml/envs/azureml_000000000000:
Creating conda environment failed with exit code: -15

我在互联网上找不到任何有用的东西，而且这不是唯一失败的脚本。当我尝试进行其他实验时，我有时会遇到这个问题。在上述情况下有效的一种解决方案是将熊猫从 pip 移动到 conda，它能够创建 coonda env。下面的例子：

# Ensure the required packages are installed (we need scikit-learn, Azure ML defaults, and Azure ML dataprep)
packages = CondaDependencies.create(conda_packages=['scikit-learn','pip'],
                                    pip_packages=['azureml-defaults','azureml-dataprep[pandas]'])

# Ensure the required packages are installed (we need scikit-learn, Azure ML defaults, and Azure ML dataprep)
packages = CondaDependencies.create(conda_packages=['scikit-learn','pip','pandas'],
                                    pip_packages=['azureml-defaults','azureml-dataprep'])

错误消息（或来自 Azure 的日志）也没有多大帮助。如果有合适的解决方案，将不胜感激。

编辑：我最近开始学习使用 Azure 进行机器学习，所以如果我不确定我是否遗漏了什么？我认为示例笔记本应该可以正常工作，因此提出了这个问题。

Answer 1

简短回答

以前完全处于你的位置。此代码示例似乎有点过时了。以this notebook为参考，可以试试下面的吗？

packages = CondaDependencies.create(
    pip_packages=['azureml-defaults','scikit-learn']
)

更长的答案

Using pip with Conda 并不总是一帆风顺。在这种情况下，conda 没有报告 pip 遇到的问题。解决方案是在本地创建和测试这个环境，我们可以获得更多信息，这至少会给您提供更多信息的错误消息。

1. 安装 anaconda 或 miniconda（或使用预装 conda 的 Azure ML 计算实例）
2. 创建一个名为 environment.yml 的文件，如下所示

name: aml_env
dependencies:
 - python=3.8
 - pip=21.0.1
 - pip:
    - azureml-defaults
    - azureml-dataprep[pandas]
    - scikit-learn==0.24.1

1. 使用命令conda env create -f environment.yml 创建此环境。
2. 响应任何发现的错误消息
3. 如果没有错误，请像这样将这个新的 environment.yml 与 Azure ML 一起使用

sklearn_env = Environment.from_conda_specification(name = 'sklearn-env', file_path = './environment.yml')

更多上下文

我猜发生的错误是当您从 conda 环境文件中引用 pip 要求文件时。在这种情况下，conda 调用pip install -r requirements.txt，如果该命令出错，conda 将无法报告错误。

requirements.txt

scikit-learn==0.24.1
azureml-dataprep[pandas]

environment.yml

name: aml_env
dependencies:
 - python=3.8
 - pip=21.0.1
 - pip:
    - -rrequirements.txt

Answer 2

查看以前的笔记本05 - Train Models.ipynb 对我有用：

packages = CondaDependencies.create(conda_packages=['pip', 'scikit-learn'],
                                    pip_packages=['azureml-defaults'])

你必须：

1. 从pip_packages 中删除'azureml-dataprep[pandas]'
2. 更改conda_packages 的顺序 - pip 应该在前