首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >AWS CloudWatch日志流-如何配置awslog每天从同一个实例向同一个日志组写入新的日志流?

问AWS CloudWatch日志流-如何配置awslog每天从同一个实例向同一个日志组写入新的日志流?
EN

Stack Overflow用户
提问于 2020-12-24 12:08:39
回答 3查看 3.4K关注 0票数 3

我有一个使用以下awslog配置文件的实例:

代码语言:javascript
复制
[general]
state_file = /var/lib/awslogs/agent-state

[logstream-0]
log_stream_name = controller
log_group_name = robots/controller
file = /mnt/data/log/controller.log
initial_position = start_of_file

[logstream-1]
log_stream_name = catcher
log_group_name = robots/catcher
file = /mnt/data/log/catcher.log
initial_position = start_of_file

CloudWatch现在拥有两个日志组(每个日志组内部都有一个日志流):

  1. 机器人/控制器: 日志流: 控制器
  2. 机器人/捕手: 日志流: 捕手

我的目标是每天创建一个新的日志流(当然是时间戳)。

应该是这样的(日期时间格式并不重要):

  1. 机器人/控制器: 日志流: 控制器_2020/12/24控制器_2020/12/23控制器
  2. 机器人/捕手: 日志流: 捕手器2020/12/24捕手器2020/12/23捕手器2020/12/22

有什么想法吗?

EN

回答 3

Stack Overflow用户

发布于 2020-12-24 12:48:07

对于日志文件隔离,file选项可以使用通配符(如/var/ log /system.log*)指向特定的文件或多个文件。根据文件修改时间,只有最新的文件被推送到CloudWatch日志。您需要将日志写入与模式匹配的新文件,您需要配置源日志以每天创建一个新文件。

时间戳使用: datetime_format = %Y-%m-%d %H:%M:%S

票数 0
EN

Stack Overflow用户

发布于 2021-01-04 19:34:08

这是一个解决办法。这可以通过修改systemd服务文件和添加一个脚本来编辑cw代理配置中的位置持有者。

/opt/aws/amazon-cloudwatch-agent/etc/config-template.json:

代码语言:javascript
复制
{
    "agent": {
        "metrics_collection_interval": 10,
        "logfile": "/opt/aws/amazon-cloudwatch-agent/logs/amazon-cloudwatch-agent.log",
        "region": "us-east-1"
    },
    "logs": {
        "logs_collected": {
            "files": {
                "collect_list": [{
                    "file_path": "/var/log/messages",
                    "log_group_name": "/hybrid_instance_1",
                    "log_stream_name": "%%DATE%%-messages",
                    "timezone": "UTC"
                }]
            }
        },
        "force_flush_interval": 15
    }
}

/etc/systemd/system/amazon-cloudwatch-agent.service:

代码语言:javascript
复制
[Unit]
Description=Amazon CloudWatch Agent
After=network.target

[Service]
Type=simple
ExecStartPre=-/bin/bash -c "/usr/sbin/update_cw_agent_config"
ExecStart=/opt/aws/amazon-cloudwatch-agent/bin/start-amazon-cloudwatch-agent
KillMode=process
Restart=on-failure
RestartSec=60s

[Install]
WantedBy=multi-user.target

/usr/sbin/update_cw_config:

代码语言:javascript
复制
#!/bin/bash
DATE_STRING=$(date +"%Y\/%m\/%d")
sed -r "s/%%DATE%%/${DATE_STRING}/g" /opt/aws/amazon-cloudwatch-agent/etc/config-template.json > /opt/aws/amazon-cloudwatch-agent/etc/amazon-cloudwatch-agent.json

然后,您可以通过crontab重新启动服务来运行/usr/sbin/update_cw_config。当然,您不能编辑服务文件,只需每天午夜运行脚本,并附加"systemctl重新启动agent“。我之所以使用systemd文件,是因为我想要一个新的流,在代理重新启动时添加日期+分和秒,而不仅仅是通过cron。

票数 0
EN

Stack Overflow用户

发布于 2021-12-21 09:11:57

他们在文档中什么都没有说,但是在他们的代码基中有一个叫做{date}的占位符

它是以不同的日期格式格式化的,但至少它是在没有烦琐的变通方法的情况下存在的。在我们的日志记录中测试了它,它解析为2021-12-21格式。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/65438114

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档