问题描述
这是我想保存在数据库中的表,这是导致问题的行:
当我尝试下沉整个桌子时,会弹出此错误:
但是当我跳过前 4 行时,复制活动会正常调试。错误还提到了列分隔符,但这是我的设置,对我来说似乎没有错。
解决方法
您最好创建一份文件的副本,其中没有要跳过的第 n 行。另一个选项是打开文件并显示列分隔符。可能存在一些破坏分隔符的隐藏内容。
对于第一个选项,您可以使用 Azure Functions 创建清理后的文件。
,在复制活动设置中,您可以更改容错设置。将跳过不兼容的行启用为 true,您可以将日志路径设置为数据湖/存储帐户中的文件。启用此功能后,复制活动不会失败,而是将这些跳过的行记录到指定的文件中。
https://docs.microsoft.com/en-us/azure/data-factory/copy-activity-fault-tolerance#configuration-1
您必须手动查看日志文件并决定跳过的行会发生什么。