首页 > 解决方案 > 本地下载的文件放在 Cloud Composer 的什么位置?

问题描述

我有一个 DAG,它从 Cloud Storage 下载文件并将其保存到以下路径:/home/airflow/gcs/data/FILENAME.txt

该文件随后会出现在 Cloud Composer 存储分区中的/data.

但是,当我最初编写 DAG 时,我没有指定下载位置为:/home/airflow/gcs/data/,只是让它下载文件。我想去删除那些文件,但我不知道在哪里可以找到它们。

当您不指定文件夹时,Cloud Composer 中下载的文件位于何处?

标签: airflowgoogle-cloud-composer

解决方案


从第一次编写 DAG 时开始,您似乎不需要担心清理问题 - 如果您使用的是gcs_download_operator,那么根据其源代码,如果您没有为filename参数指定值,则下载的文件将不会t 存储在本地文件系统上。


推荐阅读