python - Airflow DAG 任务等待大型下载完成
问题描述
气流新手。构建第一个 DAG,它执行一些日期检查,然后继续下载大型 Kaggle 数据集(7GB zip)。Airflow 在亚秒内完成此步骤,然后完成 DAG。想知道对 Kaggle API 的调用是否不起作用,或者我是否不知道 DAG 任务的任何异步默认行为。
感谢任何指针/确认,谢谢!
解决方案
推荐阅读
- angular - 使用 Bootstrap 指令时,HttpTestingController expectOne 不起作用
- c# - 监视器输入 ArgumentNullException
- python - 显示已保存选定选项的单选按钮,带有 Python Bootstrap
- python - 如何避免在单击 slack 按钮时以及在 url 请求运行时出现警告符号 slack 没有响应任何用户 ping
- keyboard - 有没有可能从键盘获取字符串并打印出来的方法?
- javascript - 像 SDK 一样的 Facebook 在首次加载时不起作用
- javascript - 如何使用 C# Selenium 调用 JS onclick 函数和参数
- python - 在 tkinter 中组织代码 - 按钮/标签
- flutter - Flutter:删除/重新创建小部件时 UniqueKey 不起作用
- typescript - TypeScript 中的 Cypress:Mocha afterEach:如果 currentTest 失败则停止运行