首页 > 解决方案 > TALEND:在将员工数据从源移动到目标时,我想删除重复项并将它们移动到单独的文件中

问题描述

TALEND:在将员工数据从源移动到目标时,我想删除重复项并将它们移动到单独的文件中

标签: talend

解决方案


确切地说,如果完整记录相同,则它是重复的

就像可能有两种情况

  1. 源文件中的重复记录
  2. 与现有表相比,源文件中的记录重复。

在源文件中重复:如果有 3 个重复记录捕获第一条记录并将其移动到目标,其他 2 条将它们移动到另一个文件(可能是你添加一个代理键来唯一地标识它们)

重复记录与表数据比较:将每个记录与表数据进行比较,如果重复将其移动到另一个文件


推荐阅读