airflow - 我是否需要关注 Google Cloud Composer 的 Airflow 调度程序详细信息？

Question

在 Airflow 调度器中，有 heartbeat 和 max_threads 之类的东西。
请参阅如何减少生产中的气流 dag 调度延迟？.

如果我使用的是 Google Cloud Composer，我是否需要担心/设置这些值？
如果不是，Google Cloud Composer 使用的值是什么？

标签： airflowairflow-schedulergoogle-cloud-composer

Answer 1

您可以在 composer instance bucket 中看到气流配置gs://composer_instance_bucket/airflow.cfg。您可以根据需要调整此配置，请记住 cloud composer 有一些配置被阻止。此外，如果您进入，Airflow UI -> Admin -> Configuration您可以看到完整的配置。