azure-data-factory - 想要获取 ADF 管道中 databricks 事件的输出,以便我可以在进一步的 ADF 事件中使用这些输出参数

标签 azure-data-factory azure-databricks

我正在进行一项在 ADF 中使用的数据 block 事件,我想在进一步的事件中获取运行输出,就像我在数据 block 中使用一个文件来从列中获取所有日期一样,现在我想要将所有这些天作为数据工厂参数中的输出,以便我可以在预复制脚本中使用这些天作为参数来删除特定日期的数据。

最佳答案

如果您要传递的参数很小,您可以使用:dbutils.notebook.exit("returnValue")(请参阅此 link )。

对于更大的输入集,我会将 Databricks 中的输入值写入文件中,并对 ADF 中的不同值进行迭代 (ForEach)。

关于azure-data-factory - 想要获取 ADF 管道中 databricks 事件的输出,以便我可以在进一步的 ADF 事件中使用这些输出参数,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/58994521/

相关文章:

azure - 在 Azure 数据工厂中使用服务主体/应用程序进行 OAuth2 身份验证

pyspark - 如何在 Databricks 笔记本中使用 Airflow 变量?

binary - 无法让 selenium webdriver 在 azure databricks 中工作

azure - ModifiedDatetimeStart/end 对于 Azure 数据工厂中的元数据事件不可见

Azure Blob 存储 - SAS - 数据工厂

Azure 数据工厂 ForEach 事件定价

apache-spark - 从 Databricks Notebook 发送带有附件的电子邮件

python - 使用 dbutils 在 Databricks 中上传后从目录中删除文件

Azure Databricks 情绪分析不起作用

azure - ADF 复制事件 FTP 源奇怪行为