首页 > 解决方案 > 使用 NiFi 仅使用新的 ElasticSearch 文档

问题描述

我有一个用例,我必须使用 NiFi 定期获取特定索引的新记录(仅以前未获取的记录)并将其通过管道传输到其他存储执行一些 ETL。

我不确定如何处理仅获取新记录。有人处理过这样的用例吗?

标签: elasticsearchetlapache-nifi

解决方案


你能更具体地说明只获取新记录吗?当您说只有之前未提取的记录时,这是否意味着具有特定的时间线?哪些记录被称为新记录?有没有具体时间要求?


推荐阅读