在 azure 数据工厂管道中查找详细的错误信息

问题描述

我的管道在更改后开始变得非常缓慢。 问题是由于错误导致副本跳过了行。

我能够撤消对列公式的更改，现在管道运行良好。 问题是没有迹象表明导致问题的原因。

有没有办法获得有关 ADF 为何跳过行的详细错误消息？

解决方法

1. 使用设置变量活动，我们可以在发生错误时捕获上一个活动的详细错误信息。

   • 在设置变量失败时添加复制活动的输出。

   

   • 在管道级别创建一个变量来存储消息。

   

   • 当您选择设置变量活动时，在变量下拉列表中，它会提供可用变量列表。选择创建的用于存储错误消息的变量。

   

   • 我们将从先前的活动输出中捕获，而不是在 Value 中对消息进行硬编码。为此，我们可以为值添加动态内容。

   • 在动态内容中添加表达式@activity('Copy data1').Error.Message。 Error.Message 用于捕获错误消息。

   

   

   • 运行管道，您可以看到复制活动失败时触发了设置变量活动。

   • 点击设置变量的输出，可以看到发生错误的详细错误信息。

   

2. 您可以通过启用会话登录复制活动来记录跳过的行或跳过的文件，并将这些日志文件存储在存储位置。

   当您选择“警告”作为日志级别时，它将仅记录跳过的文件和跳过的行。

   活动运行后，可在链接路径中下载日志文件。

参考：Session log in copy activity