我已经完成了 https://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-ssh-tunnel-local.html 中描述的过程通过本地端口转发打开 ssh 隧道,然后转到 http://localhost:8157/ .
这将打开 Hadoop/YARN 界面,此时我单击 Tracking UI/ApplicationMaster 链接,并收到“找不到此站点的服务器 DNS”页面。
根据 AWS 文档 http://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/emr-spark-history.html这应该会把我带到 Spark UI。
为了能够看到 Spark UI,我还缺少其他步骤吗?
最佳答案
最佳体验来自通过 SSH 使用 SOCKS 代理,这样它可以动态支持 URL 和端口。看看https://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-ssh-tunnel.html .
关于amazon-web-services - 是否可以通过 EMR(通过 VPC)查看 Spark UI?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/40435076/