从DynamoDB到S3的数据归档

Question

我正在尝试从DynamoDB to s3 using Kinesis Data Stream and firehose.存档数据

项目的旧图像和新图像都将保存在S3中。这会在s3中创建重复数据。

有人可以帮助指导在S3中保存新图像或旧图像吗？

Answer 1

在将数据发送到S3之前，您必须在Kinesis上使用数据转换。

简单地说，您编写Kinesis来调用Lambda函数，该函数将接收您的DynamoDB流条目，仅提取NewImage或OldImage，并将其返回给Kinesis。只有到那时，Kinesis才会交付给S3。

这是一个tutorial by AWS。