在GAE平台使用Golang开发实时通知功能时,重复通知是常见的问题,比如第三方回调重试、系统内部消息重复投递等情况,都会导致同一通知被多次处理,引发业务逻辑错误。利用Memcache的原子操作可以高效实现通知去重,保证每条通知只被处理一次。

实时通知重复的常见场景
实时通知重复通常出现在以下几种情况:
- 第三方服务发送通知时,若没有收到明确的成功响应,会触发重试机制,导致同一条通知被多次推送
- GAE实例扩缩容或者部署更新时,正在处理的通知可能被重新投递到新的实例
- 消息队列消费时,若消费确认机制异常,会导致同一条消息被多个消费者获取
Memcache原子操作的去重原理
GAE提供的Memcache服务支持Add原子操作,该操作的特性是:只有当指定的键在缓存中不存在时,才会成功写入键值对并返回true;如果键已经存在,则写入失败并返回false。这个操作是原子性的,不会出现并发写入的竞态问题,非常适合用来做通知去重。
我们可以把通知的唯一标识作为Memcache的键,设置合理的过期时间,在处理通知前先调用Add操作,如果返回成功则说明是第一次处理,正常执行业务逻辑;如果返回失败则说明该通知已经被处理过,直接忽略即可。
Golang实现代码示例
首先需要引入GAE的Memcache相关依赖,以下是完整的去重逻辑实现代码:
package notify
import (
"context"
"time"
"google.golang.org/appengine/memcache"
)
// NotifyID 通知唯一标识类型
type NotifyID string
// ProcessNotify 处理通知的去重逻辑
func ProcessNotify(ctx context.Context, notifyID NotifyID) error {
// 定义缓存键,使用通知唯一标识
cacheKey := string(notifyID)
// 设置缓存过期时间,根据通知的有效期调整,这里设置为10分钟
expireDuration := 10 * time.Minute
// 调用Memcache的Add原子操作,尝试写入缓存
added, err := memcache.Add(ctx, &memcache.Item{
Key: cacheKey,
Value: []byte("processed"),
Expiration: expireDuration,
})
if err != nil {
// 缓存操作异常,根据实际情况处理,比如记录日志后返回错误
return err
}
// 如果added为false,说明缓存已经存在,通知已经被处理过,直接返回
if !added {
return nil
}
// 以下是通知的正式业务逻辑,比如更新数据库、发送站内信等
// 这里仅做示例,实际根据业务需求实现
// doBusinessLogic(ctx, notifyID)
return nil
}
注意事项
缓存过期时间设置
过期时间需要根据通知的实际有效期设置,不能太短也不能太长。太短可能导致通知还在处理中时缓存过期,后续重试的通知被重复处理;太长则会占用过多的Memcache存储空间,建议根据业务场景评估,通常在5到30分钟之间。
Memcache操作异常处理
Memcache操作可能出现网络异常或者服务不可用的情况,此时Add操作会返回错误。如果直接忽略错误,可能会导致重复通知被处理,因此需要根据业务重要性决定是否在缓存异常时阻塞通知处理,或者引入其他降级去重方案。
通知唯一标识的选择
通知唯一标识需要保证全局唯一,比如可以使用第三方推送的通知ID、业务单号加上时间戳的组合,避免不同通知的标识冲突导致去重逻辑失效。