etl - 如何在输入中创建组并在 Talend 中的每个组中选择特定行？

Question

我正在研究 Talend 转换过程（我们使用的是 Talend 6.4）。，我不知道如何实现当前的要求。

我有一个输入包括：

• 两列是我的组键（帐户和产品），但不是唯一的（相同的帐户 x 产品对可能出现在多行中）
• 标准列（合同结束日期），这将帮助我决定要为每个组保留哪一行
• 一些需要传递到下一个处理步骤的“尾部”数据（合同号）

要执行的规则是：

• 每组只保留一个记录
• 所选记录必须是没有结束日期的记录，或者，如果所有记录都有结束日期，则具有最大的结束日期
• 选择的记录可以是随机的，以防出现平局

请参阅将这些规则应用于一些虚拟数据的转换：

我想首先做以下事情：

1. 按帐户、产品、结束日期排序（首先为空）
2. 在每个组中“选择第一”

但我不够熟练，无法知道 Talend 中是否存在第二个转换。

问候，

皮埃尔

标签： etltalend

Answer 1

非常有趣的 Talend 问题。你需要创建类似这个工作的东西。

这里是要导入 Talend 的 zip 文件的链接