postgresql - 将本地数据库迁移到 AWS Aurora

标签 postgresql amazon-web-services amazon-rds amazon-aurora

我有一个在本地运行的 postgres 数据库,我想将其迁移到 AWS Aurora(或 AWS postgres)。

我已经 pg_dump 得到了我想要的数据库,它被压缩了 ~30gb。

我应该如何上传此文件并将 AWS RDS 实例从中获取到 pg_restore

要求:

没有其他人使用该数据库,因此我们可以接受大量停机时间和对数据库的独占锁定。我们希望迁移尽可能便宜

到目前为止我已经尝试/看过的内容:

  • 在具有远程目标的本地文件上运行 pg_restore - 未知定价总额

我也想以尽可能便宜的价格来做这件事,但我不确定我是否理解他们的定价策略。

他们的定价是这样的:

Storage Rate            $0.10 per GB-month
I/O Rate                $0.20 per 1 million requests
Replicated Write I/Os   $0.20 per million replicated write I/Os

pg_restore 算作一个请求吗?该数据库有大约 22 亿个条目,如果每个条目都是 1 个请求,是否仅重新创建数据库就需要花费 440 美元?

  • AWS 数据库迁移服务 - 看起来这是最便宜的(因为它是免费的?)但它只能通过连接到本地数据库来工作。未压缩的数据约为 200gb,我不确定使用 DMS 进行一对一复制是否有意义

  • 我读过 this article但我仍然不清楚进行迁移的最佳方式。

我们可以接受这需要一段时间,我们只是希望尽可能便宜。

提前致谢!

最佳答案

迁移时需要注意的几点

AWS Database Migration Service - it looks like this would be the cheapest (as it's free?)

他们免费提供的服务是一个虚拟机(包含软件),它提供计算能力和功能以将数据库移动到他们的某些 RDS 服务。

即使该服务是免费的,您仍需为任何 RDS 使用支付正常费用

他们提供的数量大致与他们用来为您的数据提供服务的 EBS(底层磁盘)相关。一个非常大且复杂的查询可能需要一些 I/O,两者并不相等。 可以看到EBS使用的估计here

As an example, a medium sized website database might be 100 GB in size and expect to average 100 I/Os per second over the course of a month. This would translate to $10 per month in storage costs (100 GB x $0.10/month), and approximately $26 per month in request costs (~2.6 million seconds/month x 100 I/O per second * $0.10 per million I/O).

我的个人建议:只使用集合的一部分(可能是 5%)来克隆您的数据库。在那件作品上使用 DMS。您可以在几分钟内看到账单是如何为您计算的。然后您可以估算完整数据库迁移的价格

关于postgresql - 将本地数据库迁移到 AWS Aurora,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/55484536/

相关文章:

amazon-web-services - 亚马逊 AWS : DataPipelineDefaultRole/EDPSession not authorized to perform iam:ListRolePolicies

postgresql - 从 lapis 连接到 postgresql

amazon-web-services - AWS EBS、EC2、S3 之间的区别

amazon-web-services - 本地 ffmpeg 输出到 S3 Bucket

postgresql - 适当的 AWS RDS 存储大小/重新分配

node.js - Node-postgres 连接到本地主机而不是 AWS Postgres 实例

sql - 查询在 PostgreSQL 中除以零错误

sql - 原始 SQL 与 ORM 如果我已经知道 SQL

postgresql - 无法进入和更改 PostgreSQL pg_hba.conf 文件

amazon-web-services - 我们不能在tomcat下的aws服务器上部署多个spring boot应用程序吗?