首页 > 解决方案 > 使用 Matillion 从 Azure 到 Snowflake 的增量负载

问题描述

我想使用 Matillion ETL 执行从 Azure Blob 存储到 Snowflake 表的增量加载。有一个 JDBC 增量加载组件,但它适用于少数几个数据库,而 Snowflake 不是其中之一。我尝试搜索文档,但找不到任何东西。有什么建议么 ?

编辑:在我的表更新组件的属性下

在此处输入图像描述

标签: azureazure-blob-storagesnowflake-cloud-data-platformetlmatillion

解决方案


Blob 存储加载组件不支持更新或更新插入。为此,请使用 Azure Blob 存储加载组件加载到临时表。然后运行从临时表读取的转换作业,并使用带有附加选项的“表输出”组件(用于插入)或带有“不匹配时包含”选项的“表更新”组件(用于 Upsert)

在此处输入图像描述


推荐阅读