首页 > 解决方案 > 同步两个 AWS Glue 数据目录

问题描述

我有一个用例,我想同步位于不同账户的两个 AWS Glue 数据目录。

Glue 是否会在创建/删除新的数据库/表/分区时发出可以发布的通知?或者以其他方式了解其他 Glue 数据目录中发生的情况?

一种方法是收听该 Glue 帐户的 Cloudwatch 通知,但根据 Doc Cloudwatch 通知不可靠:

https://docs.aws.amazon.com/glue/latest/dg/automating-awsglue-with-cloudwatch-events.html

标签: amazon-web-servicesaws-glueaws-glue-data-catalog

解决方案


AWS 为此提供了一个开源脚本。看这里

不确定它有多可靠和快速,但值得一试。


推荐阅读