google-cloud-platform - Google Dataflow 上的 Python 流式传输管道缺少一些元素指标

Question

我正在运行 Python 数据流（beam 2.5）并且想知道为什么在beam.Map(lambda x: x.decode('utf-8')).

一切正常，但元素的数量消失了。

如您所见，从这一点开始的数字为零。

有什么我想念的吗？

标签： google-cloud-platformgoogle-cloud-dataflowapache-beam

Answer 1

使用 Google Cloud Dataflow 上的 Apache Beam Python SDK 支持流式传输管道处于 Beta 阶段。

某些功能不受完全支持，某些监控指标就是这种情况。随着支持的改进，这些将逐渐添加。