我可以使用 TriggerDagRunOperator 将参数传递给触发的 dag 吗？空气流动

如何解决我可以使用 TriggerDagRunOperator 将参数传递给触发的 dag 吗？空气流动

我使用的是 Airflow 1.10.11

我可以读到我可以使用 UI 和 CLI ( https://airflow.apache.org/docs/apache-airflow/1.10.11/dag-run.html ) 将参数发送到 dag 执行，但是我可以使用 TriggerDagRunoperator 吗？ ( https://airflow.apache.org/docs/apache-airflow/1.10.11/_api/airflow/operators/dagrun_operator/index.html ).

阅读 https://github.com/apache/airflow/blob/master/airflow/example_dags/example_trigger_target_dag.py,https://github.com/apache/airflow/blob/master/airflow/example_dags/example_trigger_controller_dag.py 似乎我可以，但是当我自己尝试这个脚本时，我无法检索 conf 消息（可能是因为他们似乎在我使用时使用了气流 2.0使用 1.10）。

所以我的问题是：当 TriggerDagRunoperator 是目标时，有没有办法将参数发送到目标 dag？

提前致谢

解决方法

对于 airflow2.0.x，您需要使用 conf 来传递参数。

如 PR 中所述，不推荐使用 python_callable

https://github.com/apache/airflow/pull/6317

更多详情，请参考

https://stackoverflow.com/a/67254524/3152654

,

这是一个示例，演示如何设置由 TriggerDagRunOperator (in 1.10.11) 触发的 dagruns 发送的 conf。

触发器.py

from datetime import datetime
from airflow.models import DAG
from airflow.operators.dagrun_operator import TriggerDagRunOperator

dag = DAG(
    dag_id='trigger',schedule_interval='@once',start_date=datetime(2021,1,1)
)


def modify_dro(context,dagrun_order):
    print(context)
    print(dagrun_order)
    dagrun_order.payload = {
        "message": "This is my conf message"
    }
    return dagrun_order


run_this = TriggerDagRunOperator(
    task_id='run_this',trigger_dag_id='my_dag',python_callable=modify_dro,dag=dag
)

dag.py

from datetime import datetime
from airflow.models import DAG
from airflow.operators.python_operator import PythonOperator

dag = DAG(
    dag_id='my_dag',1)
)


def run_this_func(**context):
    print(context["dag_run"].conf)


run_this = PythonOperator(
    task_id='run_this',provide_context=True,python_callable=run_this_func,dag=dag,)

这是 run_this DAG 中 my_dag 任务的输出

[2021-03-05 16:39:15,649] {logging_mixin.py:112} INFO - {'message': 'This is my conf message'}

---

TriggerDagRunOperator 接受一个 python_callable，它允许您修改 DagRunOrder。 DagRunOrder 是一个抽象结构，它包含运行 ID 和有效载荷，它们将是 sent as conf when the target DAG is triggered。