sql-server - 主数据库 - 本地数据库 - 10,000+ 客户端同步

Question

我有一个项目，其中将有一个主源数据库、客户端 Windows 服务、客户端应用程序、客户端数据库。我们需要一个客户端数据库，因为有时客户端由于连接问题而无法访问主数据库源。

我希望获得您的一些专业知识，了解将某些表从客户端数据库同步到主数据库以及将其他表从主数据库同步到客户端数据库的最佳/最有效方式（在几分钟内）。我还需要跟踪主数据库中同步的内容，以便我可以在仪表板中使用它。可能有多达 10,000 多个客户试图同时提取这些信息。

任何的意见都将会有帮助。

标签： sql-serverarchitecturesynchronization

Answer 1

您可能对基于Apache Kafka技术的方案感兴趣。

Apache Kafka 能够创建连接器。

架构方案将如下所示：

Local DB - Connector - Apache Kafka - Connector - Server DB.

连接器支持不同的数据库。

您可以使用连接器连接到数据库本身或分隔表。

您的方案类似于基于 Apache Kafka 技术的 ETL 方案。

您还可以开发一个应用程序，该应用程序将使用Apache Kafka Streams跟踪主数据库中同步的内容。

另一种方式，如果你不使用 Apache Kafka，就是主-主复制。