任何人都可以帮助我使用 Databricks 和 Azure 功能吗? 我正在尝试将数据 block JSON 输出传递到 ADF 作业中的 azure 函数体,这可能吗? 如果是,如何? 如果否,还有什么其他替代方法可以做到这一点?
最佳答案
在笔记本中您可以使用:
dbutils.notebook.exit(myReturnValueGoesHere)
(如前所述)
然后在 ADF 中,JSON 是一个位于 output.runOutput 上的对象,因此 @activity('RunNotebookActivityName').output.runOutput
。
如果您返回:
dbutils.notebook.exit('{"hello": {"some": {"object": "value"}}}')
您可以使用以下方式在 ADF 中阅读:
@activity('RunNotebookActivityName').output.runOutput.hello.some.object
很酷吗?
有关您可以执行的操作的完整列表,请参阅:
https://the.agilesql.club/2020/02/passing-status-messages-and-results-back-from-databricks-to-adf/
编辑
关于python - 我们可以将 Databricks 输出传递给 ADF 作业中的函数吗?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/55727018/