azure - Databricks Notebook 作为 livy session 端点的替代品

标签 azure apache-spark databricks azure-databricks livy

我想通过 Databricks API 执行 Databrikcs Notebook 的代码,并获取 Notebook 代码的输出作为响应。

是否有可能有任何解决方法吗?

Databricks SQL api 也可以实现同样的效果吗?

最佳答案

您可以通过 UI 创建作业,然后使用 run-now API 触发它,或者您可以使用run-submit API创造临时工作。这两个调用都会返回运行 ID。然后您可以通过 get-run API 监控状态,然后等待笔记本执行。之后,您可以使用 get-output API 获得笔记本的输出。 .

您还可以使用older API 1.2在现有集群上执行各个命令。 .

关于azure - Databricks Notebook 作为 livy session 端点的替代品,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/69798384/

相关文章:

azure - AWS ECR PULL 没有基本身份验证凭据

azure - 枚举 Azure 中云服务的所有实例

c# - 哪个 Azure 程序集引用了 ServiceBusTriggerAttribute?

scala - Spark RDD 默认分区数

hadoop - 从日志存档创建Spark Dstream

azure - 如何使用 Azure databricks API 创建 Python Wheel 类型的 Azure Databricks 作业

azure - 无法通过 Databricks 笔记本从 Azure 存储容器中删除目录

azure - 在 Azure 应用服务中管理 ASP.NET Core Web API secret 的最佳实践

json - 如何将 DataFrame 转换为 Json?

apache-spark-sql - 如何在 Databricks SQL 中查找具有相同(相似)名称的所有表