pipeline - ADF 管道将活动批量复制到日志文件

Question

我有一个大容量复制模板，用于在 ADF 中设置 azure blob 存储数据传输。此活动将动态生成“n”个文件。管道活动完成后，我需要编写日志文件（txt 格式）。日志文件应具有管道开始和完成日期时间以及输出的文件数、状态等。

什么是最好的方式或选择活动来做到这一点？

标签： pipelineazure-data-factorybulkazure-data-factory-2

Answer 1

首先，我不得不说 ADF 不会自动生成有关执行信息的日志文件。您可以在 ADF 中看到以可视化方式监控和以编程方式监控活动。

在上面的链接中，您可以获得start time管道：Run Start.即使它没有任何运行结束，您也可以自己计算：运行结束 = 运行开始 + 持续时间。

至于文件的数量，请参考这个链接。

无论如何，我认为所有这些指标都需要以编程方式获得，你可以选择你擅长的语言。