首页 > 解决方案 > 每天拉取数据

问题描述

我的redshift集群中有数据,每天从redshift中提取数据并在redshift基础上创建一个新的新表YY的最佳方法是几个sql查询。

就像我们在 redshift 中有一个表 XX,我想在 redshift 中创建一个表,从表 XX 中提取前 10 行

创建表 YY 作为 Select top 10 * from XX

标签: amazon-redshiftaws-glue

解决方案


使用AWS-Glue您可以安排作业,然后编写脚本代码来做特定的事情。AWS-glue可以在以下 3 种类型的事件上触发代码,在您的情况下,我认为 #1 适用。

  1. 基于 cron 计划的触发器。
  2. 基于事件的触发器;例如,成功完成另一个作业可以启动 AWS Glue 作业。
  3. 按需启动作业的触发器。

在我看来,对于您的情况,应该更适用。

我希望这能给你一些指示。


推荐阅读