首页 > 解决方案 > 将 Lambda 连接到 AWS MSK 中的 kafka 主题的最经济有效的方法是什么?

问题描述

我想将 Lambda 函数附加到 AWS MSK Kafka 集群中的主题,但根据我在 AWS 文档中的理解,这还不可能。

所以我想我可以有一个 Lambda 函数,它会以间隔运行,使用 CloudWatch 事件每分钟触发一次。

另一种选择是运行一个小型 ec2 单元来运行客户端消费者。

我不确定这是否是最便宜的解决方案。那么,我们可以使用哪些最具成本效益的解决方案来实现像 Lambda 到 SQS 连接器一样工作的解决方案?

标签: amazon-web-servicesapache-kafkaaws-lambdaamazon-sqsaws-msk

解决方案


您现在可以使用 MSK 主题作为 AWS lambdas 的事件源(截至上周)!根据亚马逊发出的发布声明,这项服务不收取额外费用!

创建 lambda 函数后,您可以添加 MSK 作为触发器。确保附上适当的政策(如下文引用的文章中所述)。

以下是一些相关资源。

https://aws.amazon.com/blogs/compute/using-amazon-msk-as-an-event-source-for-aws-lambda/ https://docs.aws.amazon.com/lambda/latest/ dg/with-msk.html


推荐阅读