我有一个同步作业(在Node.js中),它必须在一批中处理数百个文档。对于它们中的每一个,还执行几个任务。通常,在部署之后,这样的作业将成为一个黑匣子:如果没有propper日志记录,就不可能发现问题。
因此,我会记录任何合理的信息-正在处理的文档作业、正在执行的任务等。我使用console.log / console.error进行记录。这会产生一个非常大的日志文件,这在本地运行时并不是什么大问题。
在AWS上部署后,日志记录是否有任何最佳实践/限制?我也害怕成本。
谢谢!
发布于 2019-12-17 20:05:15
有很多方法可以解决这个问题。
如果您的主要需求是可视化您的数据工作流,那么使用AWS Step Functions就可以了。他们最近推出了一个名为Express Workflows的廉价版本。
分解为多个Lambdas,每个任务一个Lambdas。步骤函数将负责所有的编排、错误处理、重试等。使用AWS SQS也可能有助于平滑批处理过程。
为了获得完全的可见性,需要一个专门的工具。在无服务器中,我们无法控制基础设施,因此需要一种不同的方法。我建议你去看看Dashbird。
发布于 2018-03-02 00:08:19
我不认为有太多限制,你可以在这里找到它的定价:https://aws.amazon.com/cloudwatch/pricing/
你也可以使用像winston这样的日志记录器来控制prod中的日志级别,比如dev中的debug和prod中的info/warn。
https://stackoverflow.com/questions/49053158
复制相似问题