如何使用fluentd+elasticsearch+grafana显示容器ID的前12个字符？

Question

需要使用fluentd采集kubernet的日志，并将日志存储在elasticsearch中。并使用grafana来显示日志和摘要。但是，docker的容器id是64个字符。如何设置fluentd，或者elasticsearch，或者grafana，在grafana中只显示容器id的前12个字符？

我的配置文件如下：https://github.com/kubernetes/kubernetes/blob/master/cluster/addons/fluentd-elasticsearch/fluentd-es-configmap.yaml

Answer 1

在containers.input.conf的末尾尝试这样的东西

<filter kubernetes.**>
  @type record_transformer
  enable_ruby
  <record>
    docker.container_id ${record["docker.container_id"][0,12]}
  </record>
</filter>

Answer 2

如果可以只存储12个字符的is，可以添加fluent filter解析器(仅使用Fluent Bit进行测试)：

parsers.conf

[PARSER]
   Name    dockerid_parser
   Format  regex
   Regex   ^(?<container_id>.{12})

fluent-docker.conf

[SERVICE]
    ...
    Parsers_File /full/path/to/parsers.conf
...
[FILTER]
    Name         parser
    Match        *
    Key_Name     container_id
    Parser       dockerid_parser
    Reserve_Data On
...