apache-nifi - NiFi MergeContent 不处理流文件
问题描述
我有几个 Nifi 流消耗来自 Kafka 的数据,然后将其写入 HDFS。在写入 HDFS 之前,我们使用MergeContent
合并流文件并写入更大的消息(有点像批处理)。
然而,对于其中的 2 个流,MergeContent
似乎没有处理流文件:流文件在MergeContent
处理器之前停留在队列中。我试过修改Max Bin Age
参数,以及最大和最小条目数,它没有改变任何东西。流文件在队列中停留的时间远远超过了该max bin age
时间段。
以下是MergeContent
属性截图:
这里也是队列的截图。您可以看到至少在过去 5 分钟内没有任何处理。您还可以看到一些流文件确实被合并了,当我第一次启动它时,流工作正常,大约 10 分钟后问题出现了。
知道问题可能是什么吗?
解决方案
推荐阅读
- azure-devops - ADO 管道变量使用已安装的 nuget 版本作为变量
- java - Java Selenium 3.14 和 Edge Chromium - 如何开始工作?
- html - 一个问题和
- python - 使用flask-restplus在flask-SQLAlchemy中创建多对多关联表时出错
- python - Selenium 找不到类
- javascript - 为什么这个正则表达式会拆分第二个双引号而不是第一个双引号?
- flutter - CheckBox 值,我想添加,如果用户选中复选框,那么它应该添加 amount=amount + 18% ,如果不是那么只计算我的代码
- vuejs2 - 如何在golang中使用echo接收json数组
- snakemake - Snakemake:将命令行参数传递给脚本
- javascript - 在 for-each 中使用列表中的 JTable