使用电子病历将亚马逊S3数据导出到本地数据库

Question

是否有人使用电子病历将S3数据从Amazon导出到本地数据库？我想要编写一个定制的M/R解决方案，它将提取某些数据并并行加载到本地网络数据库实例中。我没有在亚马逊网站上看到任何声明这是可能或不可能的东西。很多人提到在AWS实例中移动数据。

Answer 1

当您说“本地网络数据库”时，您指的是EC2实例上的数据库还是本地网络上的数据库？

这两种方法都是可能的--如果您使用的是非EC2或非AWS数据库，只需确保打开您的安全组/防火墙，以建立必要的网络连接。

至于将数据从S3加载到本地数据库：

1. 您可以使用EMR处理来自S3的数据，并使用映射器将其转换为CSV格式，并将其批量导入数据库。这可能是最快的--因为从CSV大规模导入将使数据库能够非常快地导入数据。
2. 您可以使用EMR映射器直接将数据插入数据库--但我不推荐这种方法。使用多个映射器直接写入数据库，您可以轻松地重载数据库并导致暂停和进程失败。