问题描述
我必须从 blob 容器中具有不同架构(表 macthes 中的大部分架构)的文件夹中读取 10 个文件并将它们合并到一个 sql 表中 文件 1:假设有 25 个这样的列
file 2:file2 中的某些列与 file1 中的列匹配
文件 3:
如何在 azure 数据工厂中设置管道以将这些列合并到单个 sql 表中。
我的方法: 获取元数据活动--->为每个子项---复制活动
对于映射---我构建了一个包含这些文件中所有源/接收列的json
解决方法
您可以创建一个 JSON 文件,其中包含您的每个源文件名和表格翻译器。然后使用查找活动来获取此文件的内容(不要只检查第一行)。在 For Each 活动中循环此数组并在数据集中传递源文件名。最后,创建一个复制数据活动并使用表格转换器作为您的映射。