首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >在AWS中进行编写、版本和差异的最便宜的方式是什么?

问在AWS中进行编写、版本和差异的最便宜的方式是什么?
EN

Stack Overflow用户
提问于 2020-02-27 10:26:17
回答 1查看 47关注 0票数 0

我目前正在使用DynamoDB来存储一个JSON对象,然后当对象有更新时,将其与DynamoDb中的内容进行比较,然后更新DDB中的内容,并返回新旧版本作为差异。

我遇到了一个问题,对象对于DDB来说太大了,所以我需要将它存储在S3中,也许还需要在DDB中存储一个文件路径,当我进行比较时,将文件下拉并与我已有的文件进行比较,然后发送比较结果。然后我开始思考S3有版本的事实,我可以比较版本,但我最关心的是规模成本。我发现了一篇文章,谈到在S3中写/访问任何超过20K的东西都比在分布式数据库中更便宜,但除此之外,分布式数据库更便宜。我的大多数对象都是5-10K的,所以大多数时候,DDB似乎更便宜。但这也让我思考,有没有更好的成本解决方案来在我目前拥有的和现有的之间运行差异?我真的不需要有一堆版本,我只需要当前和以前的版本。

EN

回答 1

Stack Overflow用户

发布于 2020-03-28 18:31:31

我将采用以下方案

代码语言:javascript
复制
id    |  hashid      | docPath        | doc(where ever size is<400kb)
123   |  456         | bucket1/123    | {"a":"b"}
122   |  789         | bucket1/122    | 

当对DOC123的写入请求到来时,

  1. 使用id=123

从表中获取行

  1. 检查现有文档和新文档的哈希if是否相同
  2. 如果否,则旧文档和新文档相同,因此不需要更改任何内容。
  3. 如果是

a.如果表中存在文档,则响应

代码语言:javascript
复制
- return the doc as existing doc

b.其他

代码语言:javascript
复制
- get the doc from s3 using docpath and return the doc as existing doc

如果新的文档size< 400kb将此写入dynamodb和s3,否则写入s3并仅更新Dynamodb中的元数据。并将s3路径存储在Dynamodb表中。

这将确保

  1. 对于大多数用例(只要文档适合Dynamodb),您只需对dynamodb执行1次读写操作,而且速度极快。
  2. 对于其他用例(文档无法放入Dynamodb表),您将从dynamodb和s3执行2次读写操作。只有在需要时(即文档实际上是different).
  3. You的),才会为每个文档的历史记录设置s3。
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/60425416

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档