如何使用亚马逊网络服务数据管道将数据从本地SQL数据库导入到亚马逊S3?任何教程的链接都会对我有很大帮助。
发布于 2014-07-18 19:05:58
您将需要在本地运行Task Runner。任务运行器可以执行流水线,该流水线可以将数据从SQL数据库导出到S3。
如果您的数据库是MySQL,它可以直接将数据导出。如下面的教程所示。http://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-copydata-mysql.html
如果不是MySQL,那么您需要自己编写一个导出作业。例如。使用Talend DI创建一个ETL脚本,并将Talend Job包装在Shell活动中。
还有一个本地任务运行器模板。
http://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-template-localmysqltords.html
https://stackoverflow.com/questions/24797531
复制相似问题