azure - 一个源到多个汇的 azure 突触管道?

标签 azure azure-synapse azure-data-factory

我正在 azure synapse 管道中使用复制事件来复制和筛选数据 容器A/file1.csv 到容器B/file2US.csv

同样,我正在使用另一个复制事件将数据从containerA/file1.csv复制并过滤到containerB/file2IND.csv

不同地区的流程相同。在每个事件中,我添加一个 where 子句来过滤数据并将其复制到特定于区域的文件中。

这样做感觉很多余。有什么方法可以有条件地检查每一行并根据区域值将其复制到不同的接收器? 我想要实现的是一个单一的事件,可以根据每行映射到的条件选择正确的接收器。

最佳答案

您正在寻找的事件称为数据流。您将根据需要使用条件拆分转换和任意数量的接收器来实现此用例。

关于azure - 一个源到多个汇的 azure 突触管道?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/72851375/

相关文章:

azure - Synapse工作区上传包

Azure数据工厂抛出 "Invoking Azure function failed with HttpStatusCode - InternalServerError."

azure - 如何在 Azure 数据工厂 v2 中运行 SQL 脚本?

azure - 设置 Windows Azure 私有(private)云

Azure Functions 和 Azure 应用程序网关或 API 管理

python - 如何在突触分析(Microsoft azure)中将spark_df读取为数据帧?

azure - ADF IActivityLogger 记录器存储在哪里?

azure - 如何在应用程序中使用连接字符串的 Azure KeyVault 引用

azure - 解码 JWT(id_token) 的正确方法是什么?

当我们在 Visual Studio 2019 中创建 dacpac 文件时,Azure 数据仓库物化 View 出现问题