我目前正在使用DynamoDB来存储一个JSON对象,然后当对象有更新时,将其与DynamoDb中的内容进行比较,然后更新DDB中的内容,并返回新旧版本作为差异。
我遇到了一个问题,对象对于DDB来说太大了,所以我需要将它存储在S3中,也许还需要在DDB中存储一个文件路径,当我进行比较时,将文件下拉并与我已有的文件进行比较,然后发送比较结果。然后我开始思考S3有版本的事实,我可以比较版本,但我最关心的是规模成本。我发现了一篇文章,谈到在S3中写/访问任何超过20K的东西都比在分布式数据库中更便宜,但除此之外,分布式数据库更便宜。我的大多数对象都是5-10K的,所以大多数时候,DDB似乎更便宜。但这也让我思考,有没有更好的成本解决方案来在我目前拥有的和现有的之间运行差异?我真的不需要有一堆版本,我只需要当前和以前的版本。
发布于 2020-03-28 18:31:31
我将采用以下方案
id | hashid | docPath | doc(where ever size is<400kb)
123 | 456 | bucket1/123 | {"a":"b"}
122 | 789 | bucket1/122 | 当对DOC123的写入请求到来时,
从表中获取行
a.如果表中存在文档,则响应
- return the doc as existing docb.其他
- get the doc from s3 using docpath and return the doc as existing doc如果新的文档size< 400kb将此写入dynamodb和s3,否则写入s3并仅更新Dynamodb中的元数据。并将s3路径存储在Dynamodb表中。
这将确保
https://stackoverflow.com/questions/60425416
复制相似问题