Databricks 笔记本集成了 mlflow 工件位置和保留

Question

1. 目前默认情况下，在 notebook 运行中，它将创建一个实验 ID，但工件位置将指向 dbfs:/databricks/mlflow/{experiment id} 下的某个内容。如果有办法我们可以在默认实验创建中更改它？我们喜欢管理数据块之外的存储。

2. 实验运行和指标的默认 TTL 有多长？是否可配置？如何配置？

Answer 1

您可以使用mlflow_set_experiment('<PATH>') 指定您希望在哪里记录您的跑步及其所有内容。请参阅文档here.

如果您正在使用 Databricks 并希望登录到特定的 blob 存储，您可以在设置实验时将 MLflow 指向 Databricks 文件系统 (DBFS) 并mount the blob storage。

如果您正在谈论在 Databricks 中运行它并直接在本地记录结果，我认为您不能这样做。但是，您可以使用 GitHub 和 MLflow Projects 在 Databricks 上进行开发，然后在本地运行，反之亦然。