go sync/singleflight package
Goで並列処理を行う際に重複を排除することができるsingleflightpackageというものが存在する ユースケース
ある特定のタイミングで同時にキャッシュが切れるアプリケーションの場合、キャッシュが切れたタイミングでdbやキャッシュストアにリクエストが集中してしまうこと
1サーバー/コンテナ/podからのリクエストを1つに減らすことができるため、同時並列数が仮に5とかだった場合リクエスト数を1/5に減らすことができる
使い方
group.Doで囲った部分は並列処理中1度しか実行されない
code:go
package main
import (
"fmt"
"log"
"sync"
"golang.org/x/sync/singleflight"
)
var group singleflight.Group
func main() {
var wg sync.WaitGroup
for i := 0; i < 10; i++ {
wg.Add(1)
go func() {
defer wg.Done()
run("key")
}()
}
wg.Wait()
}
func run(key string) {
v, err, shared := group.Do(key, func() (interface{}, error) {
fmt.Println("called")
return key, nil
})
if err != nil {
log.Fatal(err)
}
fmt.Printf("result: %s, shared: %t\n", v, shared)
}