python - 创建或替换 AWS Glue 爬虫

Question

使用boto3：

1. 是否可以检查 AWS Glue Crawler 是否已经存在，如果不存在则创建它？
2. 如果它已经存在，我需要更新它。
3. 爬虫创建脚本会是什么样子？

这是否类似于CREATE OR REPLACE TABLE在 RDBMS 中...

有没有人这样做或有建议？

谢谢 :) 迈克尔

标签： pythonamazon-web-servicesboto3aws-glueaws-glue-data-catalog

Answer 1

据我所知，没有用于此的 API。我们使用 list_crawlers 手动列出爬虫并遍历列表以决定是否添加或更新爬虫（update_crawler）。

查看 API @ https://boto3.amazonaws.com/v1/documentation/api/latest/reference/services/glue.html