时间戳

首页 > 解决方案 > Json 对象日志转到 ElasticSearch 中的多个记录，而不是使用 fluent-bit 的单个对象

json - Json 对象日志转到 ElasticSearch 中的多个记录，而不是使用 fluent-bit 的单个对象

问题描述

我正在尝试使用 awsfirelens/fluent-bit 将 AWS ECS 日志公开给 Elastic。但问题是当日志摄入弹性时，它会进入多条记录，而不是像下面这样的单个 json 对象：

来自 ECS

{
  "environment": "Prod",
  "product": "aabbcc"
}

在弹性

第一行

{

第二行

"environment": "Prod",

第三行

"product": "aabbcc"

第 4 行

}

这是我的流利位配置：

[INPUT]
    Name forward
    unix_path /var/run/fluent.sock
    Mem_Buf_Limit 100MB

[INPUT]
    Name forward
    Listen 0.0.0.0
    Port 24224

[INPUT]
    Name tcp
    Tag firelens-healthcheck
    Listen 127.0.0.1
    Port 8877

[FILTER]
    Name record_modifier
    Match *
    Record environment ${NODE_ENV}

[OUTPUT]
    Name es
    tls On
    tls.verify Off
    Logstash_Format On
    Logstash_Prefix ${NODE_ENV}
    Match *
    cloud_id xxxxx
    cloud_auth xxxx

请告诉我忘记添加哪个，谢谢。

标签： jsonelasticsearchamazon-ecsfluentfluent-bit

解决方案

推荐阅读