azure - 为什么 ADF 数据集很重要？

Question

在 Azure 数据工厂 v2 中，我创建了许多管道。我注意到我创建的每个管道都会创建一个源数据集和目标数据集。

根据 ADF 文档:数据集是数据的命名 View ，它只是指向或引用您想要在事件中用作输入和输出的数据。

这些数据集在我的数据工厂中可见。我很好奇为什么我会关心这些？这些几乎看起来像是 ADF 创建的用于移动数据的“幕后”对象。这些对我来说有什么值(value)？我为什么要关心它们？

Answer 1

这些数据集是可以重复使用的实体。例如，如果多个管道需要相同的数据(相同的表或相同的文件)，则数据集 A 可以被许多管道引用。 链接的服务也可以重复使用。我认为这就是 ADF 拥有这些概念的原因。