在dremio中使用脚本添加反射

Question

我正在尝试使用dremio data lake上的脚本创建、更新和删除反射(原始/聚合)。有没有可能在社区版中实现？

Answer 1

可以在原始反射的社区版中做到这一点

代码模板

 ALTER DATASET <DATASET_PATH> 
        CREATE RAW REFLECTION <REFLECTION_NAME> 
        USING
        DISPLAY (
        field1,
        field2,
        field3
        )

示例

ALTER DATASET "Dremio-SPACE"."VDS_name"
CREATE RAW REFLECTION temRef
USING
DISPLAY (
firstColumn

)

用于聚合反射的

代码模板

ALTER TABLE <Source_PDS_OR_VDS_NAME> 
 CREATE AGGREGATE REFLECTION <reflection_name> 
 USING 
 DIMENSIONS (x by day, y) 
 MEASURES (b (COUNT, MIN, MAX, SUM, APPROXIMATE COUNT DISTINCT)) 
 --PARTITION BY (col1,col2...) 
 --LOCALSORT BY (col1,col2...)
 --ARROW CACHE
 --DISTRIBUTE BY (col1,col2...)

示例

ALTER TABLE <Source_PDS_OR_VDS_NAME> 
 CREATE AGGREGATE REFLECTION tempRef 
 USING 
 DIMENSIONS (x by day, y) 
 MEASURES (b (COUNT, MIN, MAX, SUM, APPROXIMATE COUNT DISTINCT))

删除反射

代码模板

ALTER DATASET <DATASET_PATH> DROP REFLECTION <REFLECTION_NAME>

示例

ALTER DATASET "Dremio-SPACE"."VDS_name" DROP REFLECTION temRef

参考http://docs.dremio.com/sql-reference/sql-commands/acceleration/