问题描述
在CDAP中,分区触发类型如下所示。
schedule(buildSchedule(“ runOnlyAtNight”,ProgramType.WORKFLOW,“ cleanupWorkflow”) .withTimeWindow(“ 22:00”,“ 06:00”)。waitUntilMet() .triggerOnPartitions(“ myDataset”,1));
在GCP上的Cloud数据融合中可用吗?
如果是,“ myDataset”是否引用存储桶中的文件夹?这意味着每当发生更改(添加文件{由于日期后缀,名称将有所不同))时,CDF将触发作业。
如果可能的话,将不会依赖于Cloud功能。
解决方法
该功能在Data Fusion中不可用。数据集是CDAP中的一个概念,但不适用于数据融合。