如何解决Airflow Kubernetes Pods 异常错误 - (404) 原因：未找到
我正在寻求支持以调试此 Airflow KubernetesPodoperator 问题。我们在 Airflow 任务执行时随机得到这个错误。作业快完成了，在作业执行结束时，pods not found excception 抛出，（，实际上，Airflow Task 这是一个 Python 作业已经完成它正在工作） 但由于这个异常 Airflow 将此作业标记为 Failed）。
ERROR - (404)
Reason: Not Found
HTTP response headers: HTTPHeaderDict({'Audit-Id': 'd4df122xx-bxcb-42f2-8c9e-768e9bbb00x9','Cache-Control': 'no-cache,private','Content-Type': 'application/json','X-Kubernetes-Pf-Flowschema-Uid': 'xxxx-xxx-xxx-xxxxxxxx','X-Kubernetes-Pf-Prioritylevel-Uid': 'xxxx-xxx-xxx-xxxxxxxx','Date': 'Sat,17 Jul 2021 02:10:07 GMT','Content-Length': '258'})
HTTP response body: {"kind":"Status","apiVersion":"v1","Metadata":{},"status":"Failure","message":"pods \"xxxx.6cb9f2cc66d0455c882cb5bae007ae84\" not found","reason":"NotFound","details":{"name":"xxx.6cb9f2cc66d0455c882cb5bae007ae84","kind":"pods"},"code":404}
我们确实在 Elasticsearch Index 中保存了详细的日志，并且在那个特殊的时间没有日志来调查为什么 Airflow 没有为这个正在运行的作业找到这些 pod。
来自 Airflow Kubernetes Expert 的人能否就如何解决和调查此问题向正确的方向提供指导？
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。