我正在尝试使用Google Cloud PubSub和Fluentd订阅者生成日志数据 . 该体系结构是，首先，一组Web服务器将其访问日志发送到同一PubSub endpoints ，其次，Fluentd服务器从PubSub endpoints 提取日志并将它们发送到Google BigQuery和其他子系统 .
我的问题是如何在这样的架构中保持信息幂等 . 根据Google Cloud Pubsub的文档，订阅者应负责保持日志的幂等性 . https://cloud.google.com/pubsub/docs/subscriber#delivery-contract
但我不确定使用许多流畅的服务器做好（如果可能的话，简单）的方法 . 你有什么好主意吗？
1 回答
将大数设置为ackDeadlineSeconds似乎足以避免在常见情况下重复日志 . https://cloud.google.com/pubsub/docs/reference/rest/v1/projects.subscriptions/create