我有下面的代码来踢胶水爬虫,每当一个文件落入S3桶。我添加了触发器,并用S3 put对象给出了存储桶的位置。但是,lambda不会在文件到达后立即自动踢开爬虫。但是,如果我在lambda函数上单击test,它就会启动Glue Crawler。请告诉我这里有什么问题。
import json
import boto3
print('Loading function')
glue = boto3.client(service_name='glue', region_name='us-east-1',endpoint_url='https://glue.us-east-1.amazonaws.com')
def lambda_handler(event, context):
#print("Received event: " + json.dumps(event, indent=2))
try:
glue.start_crawler(Name='test')
except Exception as e:
print(e)
print('Error starting crawler')
raise e发布于 2020-05-23 02:34:33
在AWS Lambda ->中,在Trigger configuration中添加一个trigger ->,选择S3、->、select bucket name等。
添加触发器后,当文件上传到存储桶时,会触发lambda。
https://stackoverflow.com/questions/61918597
复制相似问题