airflow - 如何加快新 dag 在 Apache Airflow 中显示到 Web GUI 的过程?
问题描述
我在我的中添加了一个新的 DAG,新的 DAG~/airflow/dags
需要很长时间才能在以下步骤中出现在 UI 中:
- 首先出现 dag 名称,我收到 DAG 仅在本地可用的警告。
- 然后大约1-2分钟后出现暂停按钮
我猜气流有某种间隔来检查新的 dag 并将它们插入到数据库中。我的问题是,是否可以加快将新 DAG 显示到后端数据库的过程?可能会这样做:
- 减少搜索间隔
- 让脚本手动运行并检查 dagbag 是否有可能的新 dag 和插入数据库。
解决方案
推荐阅读
- python - discord.py 试图保存单个数据但得到 json 解码错误
- windows - 如何通过命令提示符在 Windows 任务计划程序中创建带有事件触发器的任务?
- python - 在 _scraping_ 站点之后将多行文本添加到 csv 中的单个单元格
- python - python / discord.py中的全局变量
- mysql - 在搜索结果中显示单列
- python - 从表单中检索 POST 数据时出现 BadRequestKeyError 是否有原因?
- tfs - 如何使用内部版本号更新已完成的 Azure Devops 工作项上的自定义字段
- powerbi - PowerBI 中的条件 SUM
- amazon-web-services - 应该使用哪些最佳实践来实施 Cloudwatch 日志?
- sql-server - 在 asp.net 核心中创建级联下拉列表,但剃须刀页面不起作用