我是 Spark 的初学者。我尝试在 Amazon EC2 上运行 Spark,但我的系统无法识别“spark-ec2”或“./spark-ec2”。它说“spark-ec2”未被识别为内部或外部命令。
我按照指示here进行操作启动集群。我想使用 Scala,如何使其工作?
最佳答案
使用 boto 添加 PYTHON PATH 环境变量。 PYTHONPATH="${SPARK_EC2_DIR}/third_party/boto-2.4.1.zip/boto-2.4.1:$PYTHONPATH" 并执行python脚本
关于amazon-web-services - 在 Windows 8.1 上启动集群时无法识别 Spark-EC2,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/29787016/