首页 > 解决方案 > Apache Kafka 沿袭信息

问题描述

有什么方法可以获取Kafka作业的沿袭数据。

例如,我们有一个用于所有MapReduce作业的Job History URL

Kafka 是否有类似的东西,我可以在其中获取生产者的元数据,从而为特定主题生成信息?(例如:生产者的 IP 地址

标签: apache-kafkakafka-producer-api

解决方案


开箱即用,不,不适用于制片人。

您可以列出消费者客户端地址,但不能将生产者纳入主题。

一种选择是查看 Apache Atlas 以获取沿袭信息,这是 Hortonwork 的Stream Messaging Manager的一个组件,用于分析 Kafka 连接信息。

在此处输入图像描述

否则,您将无法让生产者将这些数据与消息一起发送。


推荐阅读