我想使用 HDInsight 执行 Scala 脚本。下面的文章描述了运行 py 脚本,但没有提到 abt Scala。我按照这篇文章(而不是py文件,上传的Scala文件)但是Azure DataFactory无法执行并显示错误消息:
({
"errorCode": "2312",
"message": "Spark job failed, batch id:4",
"failureType": "UserError"
}
https://learn.microsoft.com/en-us/azure/data-factory/transform-data-using-spark
最佳答案
如果你想执行用scala编写的spark代码,那么你必须调用Jar文件 。如果太复杂那么你也可以使用databricks笔记本。如果您遇到问题,请告诉我
关于scala - 如何创建 Spark 事件以在 HDInsight 上运行 Scala 脚本?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/50154437/