amazon-web-services - 我可以同时运行1000个AWS微型实例吗？

Question

我有一个简单的纯C程序，它以整数作为输入，运行一段时间(比如说一个小时)，然后返回一个文本文件。我想用1到1000的输入整数运行此程序1000次。

目前，我正在并行运行此程序(4个处理器)，需要250个小时。该程序适用于AWS微型实例(我已经对其进行了测试)。是否可以在AWS中使用1000个微实例在一小时内完成整个工作？ (每个实例的费用约为20美元-0.02美元)？

如果有可能，有人对如何做到这一点有指导意见吗？
如果不是这样，那么有人有没有低成本的替代方案？

非常感谢!

Answer 1

为了实现这一目标，您将需要:

创建一个S3存储桶以存储您的引导脚本，应用程序，输入数据和输出数据

自定义轻量级AMI:您可能要创建一个自定义轻量级AMI，该AMI知道有关下载引导脚本

的信息

Bootstrapping脚本:将从S3存储桶中下载软件，解析一个包含整数[1..1000]的custom instance tag，并下载所有其他数据。

您的应用程序:执行处理工作。

处理结束脚本是将结果上传到另一个结果S3存储桶和terminates the instance，您可能还希望发送SNS notification来传达处理结束状态。

如果您需要结果合并，则可能要创建另一个实例并将其用作协调器，等待所有“处理结束”通知以完成处理。在这种情况下，您将来可以考虑使用Amazon's Hadoop map reduce引擎，因为它几乎可以免费完成所有繁重的工作。