database - 可以扩展规模的最佳托管 postgres 服务

Question

我目前正在构建一个数据密集型 Web 服务，并且正在努力确定最适合我需要的托管数据库提供商。

简而言之：

• 我目前有一个包含 3gb 数据的数据库。
• 我的数据库将每月增长 6 到 30gb，达到 1tb（下个月 10gb，下个月：30gb 等）
• 我所有的数据都在不断更新，所以我保存的东西并不是只在只读模式下使用

现在我在 DigitalOcean 上使用 10gb 托管的 postgres 数据库，但我很快需要将我的数据库迁移到更大的实例（我计划在几周内达到 8gb 的存储空间时这样做）。

问题是我两个：

• 不想每个月都为更大的实例迁移我的数据库
• 不想保留一个 500gb 的数据库，因为知道其中的 80% 在接下来的 6 个月内不会被使用。这不划算

我查看了 Google Cloud Big Query，它似乎无需迁移数据库即可扩展，但我担心它最终可能会花费大量成本，因为：

• 我不断刷新/更新表格中的数据
• 我的查询在我的表上执行查找，这可能需要一些时间并且可能是资源密集型的（到目前为止我的查询总是小于 3 秒）

这是我第一次管理这样的大型项目，我不确定什么是最好的解决方案。

你会有见解吗？

标签： databasepostgresqlgoogle-bigquerygoogle-cloud-storage

Answer 1

如果您有一个关系模型并且需要非常频繁地更新您的数据库，那么您可能不应该使用BigQuery. 如果您的目的是分析（即少量更新和复杂查询），BigQuery 是一个很好的选择，但它不是为用作 DBMS 而构建的。

在您的情况下，如果您想启动您的项目GCP并保持您的数据模型与您已有的模型尽可能相似，我建议您看看Cloud SQL和Cloud Spanner。

两者都是完全托管的关系数据库。主要区别在于它Cloud Spanner是水平可扩展的，而Cloud SQL不是，即如果您只需要一个节点，请使用Cloud SQL. 如果您需要扩展集群，请使用Cloud Spanner.

此外，它们都有各自的 Web API。您可以在此处找到 Cloud Spanner Web API 参考。对于 Cloud SQL，参考取决于您选择的 DBMS：SQLServer、MySQL或PostgreSQL。

我希望它有帮助