速率限制
速率限制 是控制服务资源利用和质量的重要机制。 基于协程、通道和打点器,Go 优雅的支持速率限制。
代码示例
package main
import (
"fmt"
"time"
)
func main() {
// 首先,我们将看一个基本的速率限制。 假设我们想限制对收到请求的处理,我们可以通过一个渠道处理这些请求。
requests := make(chan int, 5)
for i := 1; i <= 5; i++ {
requests <- i
}
close(requests)
// limiter 通道每 200ms 接收一个值。 这是我们任务速率限制的调度器。
limiter := time.Tick(200 * time.Millisecond)
// 通过在每次请求前阻塞 limiter 通道的一个接收, 可以将频率限制为,每 200ms 执行一次请求。
for req := range requests {
<-limiter
fmt.Println("request", req, time.Now())
}
// 有时候我们可能希望在速率限制方案中允许短暂的并发请求,并同时保留总体速率限制。 我们可以通过缓冲通道来完成此任务。 burstyLimiter 通道允许最多 3 个爆发(bursts)事件。
burstyLimiter := make(chan time.Time, 3)
// 填充通道,表示允许的爆发(bursts)。
for i := 0; i < 3; i++ {
burstyLimiter <- time.Now()
}
// 每 200ms 我们将尝试添加一个新的值到 burstyLimiter中, 直到达到 3 个的限制。
go func() {
for t := range time.Tick(200 * time.Millisecond) {
burstyLimiter <- t
}
}()
// 现在,模拟另外 5 个传入请求。 受益于 burstyLimiter 的爆发(bursts)能力,前 3 个请求可以快速完成。
burstyRequests := make(chan int, 5)
for i := 1; i <= 5; i++ {
burstyRequests <- i
}
close(burstyRequests)
for req := range burstyRequests {
<-burstyLimiter
fmt.Println("request", req, time.Now())
}
}
执行结果
# 运行程序,我们看到第一批请求意料之中的大约每 200ms 处理一次。
$ go run rate-limiting.go
request 1 2012-10-19 00:38:18.687438 +0000 UTC
request 2 2012-10-19 00:38:18.887471 +0000 UTC
request 3 2012-10-19 00:38:19.087238 +0000 UTC
request 4 2012-10-19 00:38:19.287338 +0000 UTC
request 5 2012-10-19 00:38:19.487331 +0000 UTC
# 第二批请求,由于爆发(burstable)速率控制,我们直接连续处理了 3 个请求, 然后以大约每 200ms 一次的速度,处理了剩余的 2 个请求。
request 1 2012-10-19 00:38:20.487578 +0000 UTC
request 2 2012-10-19 00:38:20.487645 +0000 UTC
request 3 2012-10-19 00:38:20.487676 +0000 UTC
request 4 2012-10-19 00:38:20.687483 +0000 UTC
request 5 2012-10-19 00:38:20.887542 +0000 UTC