我正在使用环境类对管道使用估计器步骤,以便拥有自定义 Docker 映像,因为我需要一些apt-get
软件包能够安装特定的 pip 软件包。从日志中可以看出,与估计器的非管道版本不同,它完全忽略了环境变量的 docker 部分。很简单,这似乎被破坏了:
我在 SDK v1.0.65 上运行,我的 dockerfile 被完全忽略,我正在使用
FROM mcr.microsoft.com/azureml/base:latest\nRUN apt-get update && apt-get -y install freetds-dev freetds-bin vim gcc
在我的代码的 base_dockerfile 属性中。
这是我的代码片段:
from azureml.core import Environment
from azureml.core.environment import CondaDependencies
conda_dep = CondaDependencies()
conda_dep.add_pip_package('pymssql==2.1.1')
myenv = Environment(name="mssqlenv")
myenv.python.conda_dependencies=conda_dep
myenv.docker.enabled = True
myenv.docker.base_dockerfile = 'FROM mcr.microsoft.com/azureml/base:latest\nRUN apt-get update && apt-get -y install freetds-dev freetds-bin vim gcc'
myenv.docker.base_image = None
当我单独使用估算器时,这很有效,但如果我将此估算器插入管道中,它就会失败。这是我从管道运行启动它的代码:
from azureml.pipeline.steps import EstimatorStep
sql_est_step = EstimatorStep(name="sql_step",
estimator=est,
estimator_entry_script_arguments=[],
runconfig_pipeline_params=None,
compute_target=cpu_cluster)
from azureml.pipeline.core import Pipeline
from azureml.core import Experiment
pipeline = Pipeline(workspace=ws, steps=[sql_est_step])
pipeline_run = exp.submit(pipeline)
启动此服务时,容器构建服务的日志显示:
FROM continuumio/miniconda3:4.4.10... etc.
这表明它忽略了我的FROM mcr....
我与此估算器关联的环境类中的声明,以及我的pip install
fails.
我错过了什么吗?有解决方法吗?