azure - 使用 ADF 处理多个文件
问题描述
我创建了执行步骤的管道
- 从 azure blob 存储复制文件,然后保存在 Azure 数据湖存储中
- 然后 USql 任务选择该文件并在 azure 数据湖存储中创建汇总文件
- 下一个任务从该文件中选择数据并保存在数据库中
我正在传递 2 个参数 windowStart 和 windowEnd 并给出日期范围。问题是它总是处理 1 天不知道是什么问题
- 请注意,最初我使用翻转窗口触发器创建了复制任务,该触发器将所有文件从 blob 复制到 ADLStore,但是一旦我添加了新任务并手动运行,它只会处理一个文件。
谢谢
解决方案
推荐阅读
- asp.net-core - 试图用数据库优先的方法来围绕自定义身份表
- javascript - 如何将 1 添加到当前年份
- angularjs - 防止用户在多个下拉列表中选择相同的值
- python - 如何使用 StackingClassifier + Logistic Regression(二元分类)找到系数的特征名称
- javascript - 异步函数返回 [object Promise]
- c# - 应用程序用户的外键问题
- sas - SAS Proc SQL 中的列表聚合和组连接
- python - 如何使用复选框在 Python 中跳过日期
- python - 如何将熊猫系列中的数字转换为整数或浮点数?
- logstash - 在 Windows 上安装 Logstash