使用亚马逊网络服务CloudWatch insights日志的日志检索解决方案

Question

我计划实施一个日志检索解决方案，从亚马逊网络服务的CloudWatch日志使用洞察日志查询，让用户获得15天的日志。所查询的数据可以在该时间范围内的千兆到千兆之间的任何范围内。

有没有办法使用AWS服务以分页方式检索日志数据？由于API Gateway和Lambda的响应限制是有上限的，因此很难以分页的方式检索数据。

是否有其他AWS服务可用于检索cloudwatch日志数据？

Answer 1

一种选择是，首先您可以将Cloudwatch数据导出到S3。您可以定期从Cloudwatch导出数据，也可以使用Lambda订阅将数据导出到s3。

一旦数据存储在s3中，您就可以使用类似于SQL语言的雅典娜来查询数据。