我遇到一个问题:我无法在 AWS 环境 EMR 中运行用 Java 编写的 MapReduce Spark 作业。 我有一个主节点和 5 个从节点。
让Spark运行java类的正确方法是什么？
我尝试过这个guide但这对我不起作用。
谢谢!!
最佳答案
亚马逊文档可能更适合解决 EMR 特定设置问题。 https://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-spark-interactive-batch.html (特别是 https://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-spark-submit-step.html 用于批处理作业)。
关于java - 使用 Java 以独立模式运行 Spark，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/31161941/