azure - 如何从笔记本终止databricks集群?

标签 azure databricks azure-databricks

我想从笔记本级别终止 azure databricks 集群。有没有可能?

最佳答案

正如 Ganesh Chandrasekaran 在评论中所建议的那样。您可以根据您的需求选择作业集群。

作业集群会在您的作业结束时终止,从而减少资源使用和成本。集群在空闲时不会终止,而是仅在使用它的所有任务完成后才终止。如果共享作业集群失败或在所有任务完成之前终止,则会创建一个新集群。

范围为单个任务的集群在任务启动时创建并启动,在任务完成时终止。在生产中,Databricks 建议使用新的共享或任务范围集群,以便每个作业或任务在完全隔离的环境中运行。

引用 - https://learn.microsoft.com/en-us/azure/databricks/data-engineering/jobs/jobs#choose-the-correct-cluster-type-for-your-job

关于azure - 如何从笔记本终止databricks集群?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/72739912/

相关文章:

python-3.x - 您知道如何在 Databricks 集群上安装 'ODBC Driver 17 for SQL Server' 吗?

Azure Databricks 表不刷新

hosting - 关于微软Azure的问题

azure - Azure 定价 API

Databricks 更改默认目录

配置了专用链接的 Azure Databricks SCIM 预配

unit-testing - 对 databricks 笔记本上定义的函数进行单元测试以及对 pyspark DF 进行单元测试

azure-databricks - 使用服务主体从 DataBricks 连接到 Synapse

c# - 如何在 Service Fabric ASP.NET Core 2 中使用 WebListenerCommunicationListener

azure - 使用 REST api 确定 azure 函数执行完成情况