azure - 如何从 C# 自动化 Azure Spark?

标签 azure hadoop apache-spark azure-hdinsight

我可以创建集群,但如何自动化脚本?

  var clusterInfo = new ClusterCreateParametersV2
            {
                Name = clusterConfig.ClusterName,
                ...
                ClusterType = ClusterType.Spark
            };`

cluster.RunScript() ?

我可以获得 SparkContext 吗?

https://azure.microsoft.com/en-us/documentation/articles/hdinsight-apache-spark-use-bi-tools/

最佳答案

今天我们在 Linux 上的 HDInsight Spark 集群上使用 livy 服务器。

请参阅此处的文档: https://azure.microsoft.com/en-us/documentation/articles/hdinsight-apache-spark-livy-rest-interface/

关于azure - 如何从 C# 自动化 Azure Spark?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31720407/

相关文章:

azure - 在 Xamarin 中与服务器通信的最佳方式?

hadoop - Gradle 用 logback 替换传递依赖 log4j

scala - 使用 Spark Scala 为每个分区添加一个常量值

scala 未指定值参数

c# - Visual Studio 2013 解决方案构建不按构建顺序

sql - 无法连接到 Azure SQL 服务器,错误 :

azure - 通过Az模块创建azure应用程序并使用powershell分配API权限

hadoop - Amazon EMR 的输出文件夹

hadoop - 了解 mapper 和 reducer 的用法

scala - JSON 格式的 Spark DataFrame 列上的隐式模式发现