exception - Azure数据工厂复制事件错误记录异常处理

标签 exception error-handling record azure-data-factory copy-activity

在复制 Activity 中,设置中有一项功能,我们可以告诉系统如何处理错误。有3个选项。在第一个错误记录上中止,跳过所有错误行,跳过错误行并将其记录。
我们能否以某种方式实现以下功能?
-如果文件中有10%以上的记录引发错误,则跳过该文件,否则加载

提前致谢

最佳答案

我有一个解决方法,如果您有更好的方法,请告诉我
-使用“跳过并记录不兼容的行”的容错设置将数据加载到目标
-我们将获得达到复制 Activity 的总行数以及进入目标的行数。从这两个数字我们可以计算出%。
-如果该百分比大于10(或阈值),则从目标中删除数据并通知相关团队或将其放入审核日志中

仅供引用-如果我们直接使用脚本加载数据,则雪花DW中可以使用此功能。

关于exception - Azure数据工厂复制事件错误记录异常处理,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/61044479/

相关文章:

r - 将文件导出到R中的相对路径

php - 尝试在 API 调用上使用 {} catch {} 或进行不同的处理?

c# - 如何处理 404 错误

android - 获取Android SQLite数据库中的非空记录总数

f# - 在构造期间从自身内部引用记录

c# - 调试时是否可以完全忽略 catch block ?

c# - 异常处理放置 - C#

c# - 处理任务并行库中的异常

ocaml - 访问 OCaml 记录

java - 冒泡异常 : Java