data-science - Apache nifi 在数据科学中的应用

Question

我正在尝试使用 Apache NiFi 创建 Web 服务数据流。我已经设置了请求和响应 http 处理器，但是我似乎无法弄清楚如何使用来自另一个连接的数据从请求处理器更新流文件。有人可以让我知道如何实现这种行为吗？Apache nifi 的用途是什么，它是用于数据科学还是只是用于处理某种数据的工具。Apache nifi 到底是做什么的。

标签： data-scienceapache-nifi

Answer 1

Apache nifi 的用途是什么，它是用于数据科学还是只是用于处理某种数据的工具。Apache nifi 到底是做什么的。

NiFi 是一个数据编排和 ETL/ELT 工具。它并不适用于数据科学，因为数据科学主要是关于分析的。数据工程师使用它来处理数据、移动数据等。这些任务往往发生在数据科学工作之前。

我似乎无法弄清楚如何使用来自say的数据从请求处理器更新流文件

使用InvokeHttp. 您可以将其配置为“始终输出响应”，然后您将可以使用响应。NiFi 不会自动将响应与您发送的数据合并，因此您需要让您编写的 REST API 向您发送您认为在 NiFi 方面令人满意的输出。这是基于 REST 的扩充的常见用例。