首页 > 解决方案 > 当本地 MySql 没有使用 ADF 参考的日期字段时,如何将增量数据从本地 MySql 复制到 Azure MySql

问题描述

我试图使用 ADF 从本地 mysql 复制到 azure mysql。有些表格已经填写了日期,因此我可以使用翻滚窗口功能并填充增量数据。但有些表格没有填写任何日期以供参考。

他们是否有任何功能可以获取此类表的增量数据?

标签: mysqlazureazure-data-factoryazure-data-factory-2

解决方案


根据我的经验,在设计表结构时必须生成数据字段(如 createTime、modifyTime)。这对于日志监控、故障排除和增量非常重要。正如@Martin 在评论中所说,您总是需要一个字段来确定增量的标准。

如果可以接受,您可以从现在开始添加数据字段(只是自动完成,无需更改其他策略)以保证一致性。如果无法修改表格,可能需要考虑为新数据添加其他位置同时。例如,Azure 表存储,您可以控制列。


推荐阅读