BigQuery-合并数据集中的所有表

问题描述

我在BigQuery中有一个数据集，每两天上传一次新表。所有表都一样。

要编写和安排查询，而不是联合所有表，包括何时将新数据上传到数据集。

使用下面的表并可以正常工作，但是，每当我添加一个新表时，都需要手动将其包括在查询中。在查询正在查询数据集中所有表的地方寻找一个选项。

(Select * from PnL.kapitani as cl WHERE cl.billing_date is not null)
Union ALL (Select * from PnL.One_Time WHERE billing_date is not null)
Union ALL (Select * from PnL.DSP WHERE billing_date is not null)
Union ALL (Select * from PnL.strypes WHERE billing_date is not null)
Union ALL (Select * from PnL.Cloud_Office WHERE billing_date is not null))```

解决方法

以下是用于BigQuery标准SQL

所有表都相同。
在查询正在查询数据集中所有表的地方寻找一个选项。

您可以使用BigQuery的Wildcard tables功能

因此，您的查询看起来就像下面的

Select * from PnL.* WHERE billing_date is not null

google-bigquery union-all