airflow-operator专题提供airflow-operator的最新资讯内容,帮你更好的了解airflow-operator。
我将使用 Tor 从网络中提取一些数据。我需要并行化这个过程。 我使用第一个 PythonOperator 来运行 Tor Contr
如何在 Airflow 2.0 中安排 DAG 使其不在假期运行? 问题 1:每个月的第 5 个工作日运行? 问题 2 : 每
我正在尝试使用我通过 <code>data</code> 发送的配置在 Airflow 中的 <code>SimpleHttpOperator</code> 中正确呈现 <code>
在airflow中,如果你向dag添加一个新任务,然后在旧的dag运行中清除其下游任务,airflow将首先运行你刚刚
我构建了两个 DAG(dag_a, dag_b) 并在 dag_b 中创建了一个外部任务传感器,它会戳破 dag_a。这些 DAG 有两个用
当我运行 Airflow SubDag 示例时,第一个 SubDag 陷入运行状态。第一个 SubDag 中的不同任务实例具有 no_status
我有一个要求,我需要通过 Airflow SQLsensor 运算符捕获 XCOM 响应并应用一些 python 命令来更改数据格式。</
考虑我有一个气流 DAG 包含三个任务 t1、t2、t3。 DAG 的流程是 <code>t1&gt;&gt;t2&gt;&gt;t3</code>。 我想找到一
我使用的是 Airflow 1.10.11。 <a href="https://stackoverflow.com/questions/66492566/can-i-use-a-triggerdagrunoperator-to-pass
我正在尝试以动态方式在 postgres 运算符中传递参数。 刷新元数据有两个任务, <ol> <li>获取id
我已经在运行 Ubuntu 和 python 3.8 的服务器上安装了 Airflow。我正在尝试在 Airflow UI 中导入一个简单的 dag
<div class="snippet" data-lang="js" data-hide="false" data-console="true" data-babel="false"> <div class="snippet-code"> <pre class="
我正在开发一个 Airflow 管道,一旦传感器任务在特定存储桶路径中找到文件 <code>_SUCCESS</code>,就会触发
我正在尝试制作一个动态的工作流程。 我收到了这个损坏的 DAG 错误重复任务 ID <pre><code>Broken DA
我在 SubDagOperator 函数中传递一组参数,然后调用 PythonOprerator 但 Jinja 模板或宏没有被渲染 <pre class="la
我有两个简单的任务,一个是获取 id 列表,另一个必须使用 echo 命令显示 id 列表。 xcom push 的结果似乎
我是气流的新手,需要关于如何在 k8s 上安装气流的帮助。 需求是: 1。如何仅为网络服务器和调
我有一个自定义运算符,在参数列表中我使用 xcom_pull 从 XCOM 获取值。但它不会呈现为实际值,而是保留
我正在使用气流 2.x 并且我正在尝试使用 S3ToRedshiftOperator 将数据文件从 S3 移动到红移 <pre><code> s3_to
我正在尝试使用气流 DAG 感应文件,但我的 FileSensor 始终卡在队列状态。我试过下面的代码示例。有什么