我有一个百万条记录的DynamoDB表。我正在使用数据管道将DynamoDb表导出到S3。但是数据管道将表导出为一组DynamoDB json格式的原始JSON文件。数据管道运行一个小时后,EMR因超时异常而失败。
有没有办法将DynamoDB表导出为CSV并增加Data Pipeline中的EMR超时配置?
发布于 2020-10-09 20:36:34
您可以检查DynamoDBToCSV导出器服务。此工具是一个简单的节点项目,您必须在其中放置您的亚马逊网络服务配置,然后您可以运行并下载dynamoDB表中的所有记录。
https://stackoverflow.com/questions/62143663
复制相似问题