实现 Google Pub/Sub 订阅 + HTTP Rest API + 数据库的最佳方式

Question

我想问一下使用 REST API 实现 Pub Sub 的最佳方式。

我想从 Pub/Sub 订阅数据，然后我通过 HTTP Rest API 发送数据，该 API 每次订阅都会命中每个端点。 然后，在命中端点后保存到数据库中。

所以，服务中有 3 个工作。

1. 订阅 Pub/Sub
2. 通过 HTTP Rest API 从步骤 1 发送有效负载
3. 将数据保存到数据库中。

我的第一种方法是创建两个不同的服务。

1. 第一个从 Pub/Sub 订阅数据的服务。
2. 第二个服务将第 1 步中的有效负载数据发送到 HTTP Rest API，并在此服务中将有效负载保存到数据库中。

实现它的最佳方式是什么？

如果来自 Pub/Sub 的数据过多怎么办。服务是否可能会出现故障或缓慢？

我在 Pub/Sub 方面没有太多经验。

谢谢。

Answer 1

因为您的架构是异步的，我建议您采用这种方法

1. PubSub 推送订阅（初始主题）
2. 调用 HTTP 服务的 Cloud Run 服务。如果成功，在 PubSub 中发布消息 3 PubSub 推送订阅（关于成功的 HTTP REST API 调用的主题）
3. 将数据保存在数据库中的 Cloud Run 服务。

该架构是幂等且可扩展的。您可以使用 Cloud Run 的并发参数来节省资金或加快进程。