amazon-s3 - 将 AWS cloudwatch 日志导出到 S3

Question

我在 AWS 上有一个 lambda 函数，它通过 AWS cloudwatch 存储它的日志。我想使用 CLI 将所有这些日志存储到 S3。我的 linux 服务器已经配置了 CLI，并且拥有访问 AWS 资源所需的所有权限。
我希望在我的 AWS cloudwatch 控制台上显示的日志应该通过 S3 存储桶创建。
曾经，这些日志存储到 S3 上的某个位置，然后我可以通过 Redshift 轻松地将它们导出到 SQL 表。
知道如何将这些日志带到 S3 吗？
谢谢阅读。

标签： amazon-s3aws-lambdaaws-cliamazon-cloudwatchaws-cloudwatch-log-insights

Answer 1

您可以在 lambda 中使用 boto3 并将日志导出到 S3 中，需要编写一个 lambda 函数来订阅 CloudWatch 日志并在云观察日志事件上触发。

AWS 文档：

• http://docs.aws.amazon.com/AmazonCloudWatch/latest/logs/SubscriptionFilters.html#LambdaFunctionExample

• https://docs.aws.amazon.com/AmazonCloudWatch/latest/logs/S3Export.html

• https://docs.aws.amazon.com/AmazonCloudWatch/latest/logs/S3ExportTasksConsole.html

示例：https ://medium.com/dnx-labs/exporting-cloudwatch-logs-automatically-to-s3-with-a-lambda-function-80e1f7ea0187