在Container Optimized OS中将Injest日志记录为JSON

问题描述

我能够在Container Optimized OS的堆栈驱动程序日志记录代理的帮助下将日志记录注入Google Log Viewer。

使用默认配置时，它会记录为消息的值，但不会记录为json有效负载

我尝试了什么？

我将/etc/stackdriver/logging.config.d/fluentd-lakitu.conf中的流利配置更改为以下内容：

<source>
  @type tail
  format json
  path /var/lib/docker/containers/*/*.log
  <parse>
    @type json
  </parse>
  pos_file /var/log/google-fluentd/containers.log.pos
  tag reform_contain
  read_from_head true
</source>

但无法将日志发送到日志查看器

操作系统：容器优化的操作系统cos-81-12871-1196-0

解决方法

我在Google's Public Issue Tracker上发现了此问题，该问题讨论了您在用例中提到的相同问题。 Google产品小组已收到有关此限制的通知，并且他们正在努力。您只需要去那里，然后单击标题旁边的星号，即可获取有关该问题的最新信息，并使该问题更具可见性。

,

正如 @Kamelia Y 提到的关于 https://issuetracker.google.com/issues/137517429

提到了使用的解决方法

<filter cos_containers.**>
@type parser
format json
key_name message
reserve_data false
emit_invalid_record_to_error false
</filter>

以上代码段将日志解析为 JSON 并注入到 Cloud Logging。

在关于 Stackdriver 的 Google Groups 中的讨论中，我们讨论了如何将其与启动脚本一起使用。

这是启动脚本的片段。

cp /etc/stackdriver/logging.config.d/fluentd-lakitu.conf /etc/stackdriver/logging.config.d/fluentd-lakitu.conf-save
# Shorter version of the above: cp /etc/stackdriver/logging.config.d/fluentd-lakitu.conf{,-save}
(
head -n -2 /etc/stackdriver/logging.config.d/fluentd-lakitu.conf-save; cat <<EOF
<filter cos_containers.**>
@type parser
format json
key_name message
reserve_data false
emit_invalid_record_to_error false
</filter>
EOF
) > /etc/stackdriver/logging.config.d/fluentd-lakitu.conf
sudo systemctl start stackdriver-logging

此图像可用于生成随机 JSON 日志。 https://hub.docker.com/repository/docker/patelathreya/json-random-logger