如何将AWS胶与Document DB连接

Question

有人知道如何将Glue与Document连接起来吗？

不幸的是，我遵循的AWS博客https://aws.amazon.com/blogs/big-data/building-aws-glue-spark-etl-jobs-using-amazon-documentdb-with-mongodb-compatibility-and-mongodb/并没有像预期的那样工作。

我遵循的步骤

endpoint

• Created

• 创建了Doc安全组以打开端口27017

• 使用个人帐户中的默认vpc创建了一个Doc，能够使用Cloud9连接到DocumentDb，并在测试db

• 中创建了一个文档数据库连接，同时创建了选定的默认VPC安全组，而Doc安全组

• 创建了一个S3 VPC endpoint

• Create，它使用博客中给出的脚本粘合VPC endpoint

• Create，但它在行dynamic_frame2 = glueContext.create_dynamic_frame.from_options

中失败。

错误-调用o92.getDynamicFrame时发生错误。在等待连接时，在30000 ms之后超时。集群状态的客户端视图是{type=UNKNOWN，servers={address=，type=UNKNOWN，state=CONNECTING，由{java.net.SocketTimeoutException: connect超时}}引起的异常打开套接字}。

Answer 1

我想通了。由于此作业是使用Spark脚本编辑器创建的，因此需要建立DB连接。打开“作业”脚本，转到“作业详细信息”选项卡，单击“高级属性”，然后从下拉列表中选择Doc连接，它就可以工作了。