在 dremio 中使用脚本添加反射

问题描述

我正在尝试使用 dremio 数据湖上的脚本创建、更新和删除反射（原始/聚合）。社区版可以做吗？

解决方法

是的，可以在社区版中进行 对于 RAW 反射

代码模板

 ALTER DATASET <DATASET_PATH> 
        CREATE RAW REFLECTION <REFLECTION_NAME> 
        USING
        DISPLAY (
        field1,field2,field3
        )

示例

ALTER DATASET "Dremio-SPACE"."VDS_name"
CREATE RAW REFLECTION temRef
USING
DISPLAY (
firstColumn

)

对于聚合反射

代码模板

ALTER TABLE <Source_PDS_OR_VDS_NAME> 
 CREATE AGGREGATE REFLECTION <reflection_name> 
 USING 
 DIMENSIONS (x by day,y) 
 MEASURES (b (COUNT,MIN,MAX,SUM,APPROXIMATE COUNT DISTINCT)) 
 --PARTITION BY (col1,col2...) 
 --LOCALSORT BY (col1,col2...)
 --ARROW CACHE
 --DISTRIBUTE BY (col1,col2...)

示例

ALTER TABLE <Source_PDS_OR_VDS_NAME> 
 CREATE AGGREGATE REFLECTION tempRef 
 USING 
 DIMENSIONS (x by day,APPROXIMATE COUNT DISTINCT))

删除反射

代码模板

ALTER DATASET <DATASET_PATH> DROP REFLECTION <REFLECTION_NAME>

示例

ALTER DATASET "Dremio-SPACE"."VDS_name" DROP REFLECTION temRef

参考 http://docs.dremio.com/sql-reference/sql-commands/acceleration/