将 blob 容器中的不同架构合并到单个 sql 表中

如何解决将 blob 容器中的不同架构合并到单个 sql 表中

我必须从 blob 容器中具有不同架构（表 macthes 中的大部分架构）的文件夹中读取 10 个文件并将它们合并到一个 sql 表中 文件 1：假设有 25 个这样的列

file 2：file2 中的某些列与 file1 中的列匹配

文件 3：

输出：一个sql表

如何在 azure 数据工厂中设置管道以将这些列合并到单个 sql 表中。

我的方法： 获取元数据活动--->为每个子项---复制活动

对于映射---我构建了一个包含这些文件中所有源/接收列的json

解决方法

您可以创建一个 JSON 文件，其中包含您的每个源文件名和表格翻译器。然后使用查找活动来获取此文件的内容（不要只检查第一行）。在 For Each 活动中循环此数组并在数据集中传递源文件名。最后，创建一个复制数据活动并使用表格转换器作为您的映射。