Azure数据工厂中的架构合规性

问题描述

我正在尝试使ADF中的输入文件符合架构要求。我已经尝试过以下。

1. 获取元数据活动
2. 源活动中可用的架构验证

但是以上方法似乎仅检查特定字段是否存在于指定位置。同样，Azure默认情况下也将所有这些字段的数据类型作为字符串，因为输入是平面文件。

我也想检查位置和数据类型。例如：-

身份证，姓名，工资
1，abc，10
2，def，20
3，ghi，50
xyz，jkl，10

以emy作为xyz的行不是数字数据类型，因此需要拒绝。任何帮助表示赞赏。

解决方法

您可以使用数据流并创建一个过滤器来实现此目的。

以下是我的测试：

1。创建源

2。创建一个过滤器并使用以下表达式：regexMatch(empid,'(\\d+)')

3。输出：

希望这可以为您提供帮助。