【问题标题】:Airflow + Sentry - no information from dags/tasksAirflow + Sentry - 没有来自 dags/tasks 的信息
【发布时间】:2020-05-20 13:26:37
【问题描述】:

我正在尝试开始使用哨兵从气流中获取信息。我正在使用最新版本的气流(从 v1.10.6 起,哨兵与气流集成)。但是,我无法获得有关 dag 或任务状态的任何信息。

我准备了一些简单的 dag,它应该会失败,但在哨兵上我什么也没收到。建立连接是因为当我在导入中输入一些错字时,错误信息在哨兵处被捕获。对于这个例子,我使用了SequentialExecutor


from airflow import DAG
from airflow.operators.python_operator import PythonOperator
from airflow.utils.trigger_rule import TriggerRule


from airflow.utils.dates import days_ago

from airflow import AirflowException


################################################################################
# dag

default_args = {
    'owner': 'airflow',
    'depends_on_past': False,
    'start_date': days_ago(2),
    'email': ['airflow@example.com'],
    'email_on_failure': False,
    'email_on_retry': False,
    'retries': 0,
    'retry_delay': timedelta(seconds=3),
}

dag = DAG(
    'debug_sentry',
    default_args=default_args,
    schedule_interval=None,
)


################################################################################
# first_task

def _first_task_callable(*args, **kwargs):
    pass


first_task = PythonOperator(
    task_id='first_task',
    python_callable=_first_task_callable,
    provide_context=True,
    trigger_rule=TriggerRule.ONE_SUCCESS,
    dag=dag
)


################################################################################
# second_task_which_fails

def _second_task_which_fails_callable(*args, **kwargs):
    a = 1
    b = 0
    c = a / b

    return c

second_task_which_fails = PythonOperator(
    task_id='second_task_which_fails',
    python_callable=_second_task_which_fails_callable,
    provide_context=True,
    trigger_rule=TriggerRule.ONE_SUCCESS,
    dag=dag
)

################################################################################
# third_task

def _third_task_callable(*args, **kwargs):
    pass

third_task = PythonOperator(
    task_id='third_task',
    python_callable=_third_task_callable,
    provide_context=True,
    trigger_rule=TriggerRule.ONE_SUCCESS,
    dag=dag
)


################################################################################

first_task >> second_task_which_fails >> third_task


我做错了什么或者我错过了airflow.cfg的配置?

[sentry]
sentry_dsn = https://<my_dsn>

【问题讨论】:

    标签: airflow sentry


    【解决方案1】:

    最近对 Airflow 中的 Sentry 集成进行了修复:https://github.com/apache/airflow/pull/7232。尝试将气流更新为此提交?

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2022-08-06
      • 2022-11-08
      • 1970-01-01
      • 2013-07-22
      相关资源
      最近更新 更多