繁体   English   中英

气流未在 UI 上的任务实例中创建日志文件或显示日志

[英]Airflow not creating log files or showing logs in task instance on UI

我遇到以下气流问题:

当我运行其中包含多个任务的 Dags 时,随机气流将一些任务设置为失败状态,并且也不在 UI 上显示任何日志。 我去了我正在运行的工作容器,看到那些失败任务的日志文件也没有创建。

去芹菜花,我发现了这些失败任务的日志:

airflow.exceptions.AirflowException: Celery command failed on host

如何解决这个问题?

在此处输入图像描述 我的环境是:

  • 气流:2.3.1
  • 码头工人撰写
  • 芹菜执行者
  • 不同容器中的工作器、网络服务器、调度程序和触发器 Docker 组合托管在 Ubuntu 上

我还看到了这个可能相关的https://stackoverflow.com/a/69201032/11949273答案。

有同样问题的人吗?

编辑:

在我的 EC2 实例上,我获得了更多的 vCPU 和微调的气流/芹菜工人参数并解决了这个问题。 可能是缺少 CPU 或其他问题。

我面临一些问题。 在我的情况下Inspect -> Console在旧浏览器(Chrome 83.X)中的replaceAll有一些错误。 Chrome 98.X 没有这个问题。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM