问题描述
我们在bigquery中使用了策略标记以实现列级安全性。 (https://cloud.google.com/bigquery/docs/best-practices-policy-tags)。现在,我们要检查具有策略标记的表和属性的列表。 bigquery中有什么方法可以使用@R_169_4045@ION_SCHEMA来获取它吗?还是任何其他实用的方法来获取带有某些策略标签的属性?
解决方法
您可以尝试此解决方案,它将为您提供使用PolicyTag的表和列的列表:
将表列表写入文件:
DATASET="dataset-name"
bq ls --max_results=10000 ${DATASET} | awk '{ print $1 }' | sed '1,2d' > table_list.txt
Shell脚本:
#!/bin/bash
DATASET="dataset-name"
echo "------------------------------"
echo "TableName ColumnName"
echo "------------------------------"
while IFS= read -r TABLE; do
TAG_COUNT="`bq show --schema ${DATASET}.${TABLE} | grep "policyTags" | wc -l`"
if [ "${TAG_COUNT}" -ge 1 ]
then
COLUMN="`bq show --format=prettyjson ${DATASET}.${TABLE} | jq '.schema.fields[] | select(.policyTags | length>=1)' | jq '.name'`"
echo "${TABLE} ${COLUMN}"
fi
done < table_list.txt