如何使用AWS Glue Crawler读取PostgreSQL表分区？

Question

在Postgresql 11中创建分区时，我的Crawler无法正确读取RDS分区表。

分区DDL的示例是

表：

CREATE TABLE book (
    ID int8 NULL,
    effectivetodate date NULL,
) PARTITION BY RANGE(effectivetodate);

分区：

CREATE TABLE book_historical PARTITION OF portfolio for VALUES FROM ('1000-12-31') TO ('2019-12-31');
CREATE TABLE book_current PARTITION OF portfolio DEFAULT;

据观察，有两个表格：

• book_historical
• book_current

是由Crawler创建的，但是主表

• book

不在那里。

Answer 1

使用范围的INstead只是传递用于分区的列名，爬虫将根据您的列进行动态分区。

CREATE TABLE book (
    ID int8 NULL,
    effectivetodate date NULL,
) PARTITION BY effectivetodate;