如何解决Apache Airflow Dependencies,如果任务是并行的怎么办?
假设我们有3个任务“ A,B,C”以“ A >> B >> C”的顺序执行。
我正在使用Apache Airflow并创建将使用这3个任务的DAG。
我必须写(其中任务A是ta,任务B是tb,任务C是tc):
ta>>tb>>tc
但是,如果在A之后又转到B和C这两个并行任务呢?
我将如何编写依赖项?
解决方法
最简单的方法如下
ta >> tb
ta >> tc
或
ta >> [tb,tc]
这将使B
之后的C
和A
平行
更多信息可以在这里找到:https://airflow.apache.org/docs/stable/concepts.html#bitshift-composition
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。