amazon-web-services - 与客户端断开连接后如何检查在 amazon EMR 或 EC2 上运行的配置单元查询

Question

我已经多次遇到这个问题了。我使用命令行 ssh 到亚马逊 EC2 或 EMR 机器，并在交互模式下运行一些 hive 查询。这显示了mapper和reducer阶段的逐步进展。但是，假设由于某些网络问题，我与 EC2 或 EMR 机器断开连接。现在，我的 hive 查询还会运行吗？如果是，那么我可以再次检查进度报告吗？就像我们在 hive 控制台上看到的那样？

Answer 1

因此，您可以做三件事:

1. 使用网络界面。亚马逊为您提供了详细信息 here

2. 在 screen 中运行查询然后，如果您断开连接，只需重新连接并重新连接到之前的 session 即可。您还可以将日志记录指向某个文件而不是 stdout，这样您就可以在重新登录到计算机时重新打开该文件

3. 使用 nohup 运行查询因此它不会附加到任何 session ，即使在您被启动后也会继续自行运行。再次，将所有日志记录传输到某个文件而不是 stdout，然后只需检查该文件或在重新登录后跟踪它。