Golang高效流控实践

流控对于构建高可靠弹性系统至关重要,本文介绍了Golang内置的流控组件,通过该组件就可以打造适合各种业务场景的流控系统。原文: Rate Limiting in Go: Controlling Traffic with Efficiency[1]

Jon Cellier @Unsplash
Jon Cellier @Unsplash
导言

流控(Rate limiting)是构建可扩展弹性系统的重要技术之一,目的是通过限制指定时间内允许通过的请求数量来控制流量。在 Go 中实施流控可以确保最佳的资源利用率,并保护应用不被过多的流量或滥用行为所冲垮。本文将探讨 Go 中的流控技术,并提供代码示例,帮助感兴趣的读者有效实施这些技术。

了解流控

流控包括定义一套规则,确定客户端在给定时间窗口内可以发出多少请求,从而确保系统能够处理负载,防止滥用或拒绝服务攻击[2]。两种常见的流控方法是:

  • **固定窗口流控(Fixed Window Rate Limiting)**:在这种方法中,在一个固定时间窗口内执行流控。例如,如果流控设置为每分钟 100 个请求,则系统在任何给定的 60 秒窗口内最多允许 100 个请求,超过此限制的请求将被拒绝或延迟到下一个时间窗口。
  • **令牌桶流控(Token Bucket Rate Limiting)**:令牌桶流控基于令牌从桶中消耗的概念。令牌桶最初装满固定数量的令牌,每个令牌代表一个请求。当客户端要发出请求时,必须从桶中获取一个令牌。如果桶是空的,客户端必须等待,直到有令牌可用。
在 Go 中实施流控

Go 提供了一个名为 golang.org/x/time/rate 的内置软件包,实现了流控功能。接下来我们看看如何使用固定窗口和令牌桶两种方法来实现流控。

固定窗口流控
package main

import (
 "fmt"
 "golang.org/x/time/rate"
 "time"
)

func main() {
 limiter := rate.NewLimiter(rate.Limit(100), 1// Allow 100 requests per second

 for i := 0; i < 200; i++ {
  if !limiter.Allow() {
   fmt.Println("Rate limit exceeded. Request rejected.")
   continue
  }
  // Process the request
  fmt.Println("Request processed successfully.")
  time.Sleep(time.Millisecond * 100// Simulate request processing time
 }
}

在上面的代码片段中,我们用 rate.NewLimiter 创建了一个限制器,其速率限制为每秒 100 个请求。每个请求都会调用 limiter.Allow() 方法,如果允许请求,则返回 true,如果超过速率限制,则返回 false,超过速率限制的请求将被拒绝。

令牌桶流控
package main

import (
 "fmt"
 "golang.org/x/time/rate"
 "time"
)

func main() {
 limiter := rate.NewLimiter(rate.Limit(10), 5// Allow 10 requests per second with a burst of 5

 for i := 0; i < 15; i++ {
  if err := limiter.Wait(context.TODO()); err != nil {
   fmt.Println("Rate limit exceeded. Request rejected.")
   continue
  }
  // Process the request
  fmt.Println("Request processed successfully.")
  time.Sleep(time.Millisecond * 100// Simulate request processing time
 }
}

在上述代码中,我们用 rate.NewLimiter 创建了一个限制器,其速率限制为每秒 10 个请求,允许 5 个并发请求。每个请求都会调用 limiter.Wait() 方法,该方法会阻塞直到有令牌可用。如果令牌桶是空的,没有可用令牌,请求就会被拒绝。

动态流控

动态流控是指根据客户端行为、系统负载或业务规则等动态因素调整速率限制。这种技术允许我们实时调整流控,以优化资源利用率并提供更好的用户体验。让我们看看 Go 中动态流控的示例:

package main

import (
 "fmt"
 "golang.org/x/time/rate"
 "time"
)

func main() {
 limiter := rate.NewLimiter(rate.Limit(100), 1// Initial rate limit of 100 requests per second

 // Dynamic rate adjustment
 go func() {
  time.Sleep(time.Minute) // Adjust rate every minute
  limiter.SetLimit(rate.Limit(200)) // Increase rate limit to 200 requests per second
 }()

 for i := 0; i < 300; i++ {
  if !limiter.Allow() {
   fmt.Println("Rate limit exceeded. Request rejected.")
   continue
  }
  // Process the request
  fmt.Println("Request processed successfully.")
  time.Sleep(time.Millisecond * 100// Simulate request processing time
 }
}

在上面的代码片段中,我们创建了一个限制器,初始速率限制为每秒 100 个请求。然后,启动一个 goroutine,在一分钟后将速率限制调整为每秒 200 个请求。这样,我们就能根据不断变化的情况动态调整流控。

自适应流控

自适应流控可根据之前请求的响应时间或错误率动态调整速率限制,从而允许系统自动适应不同的流量条件,确保获得最佳性能和资源利用率。让我们看看 Go 中自适应流控示例:

package main

import (
 "fmt"
 "golang.org/x/time/rate"
 "time"
)

func main() {
 limiter := rate.NewLimiter(rate.Limit(100), 1// Initial rate limit of 100 requests per second

 // Adaptive rate adjustment
 go func() {
  for {
   responseTime := measureResponseTime() // Measure the response time of previous requests
   if responseTime > 500*time.Millisecond {
    limiter.SetLimit(rate.Limit(50)) // Decrease rate limit to 50 requests per second
   } else {
    limiter.SetLimit(rate.Limit(100)) // Increase rate limit to 100 requests per second
   }
   time.Sleep(time.Minute) // Adjust rate every minute
  }
 }()

 for i := 0; i < 200; i++ {
  if !limiter.Allow() {
   fmt.Println("Rate limit exceeded. Request rejected.")
   continue
  }
  // Process the request
  fmt.Println("Request processed successfully.")
  time.Sleep(time.Millisecond * 100// Simulate request processing time
 }
}

func measureResponseTime() time.Duration {
 // Measure the response time of previous requests
 // Implement your own logic to measure the response time
 return time.Millisecond * 200
}

在上述代码片段中,我们用 measureResponseTime 函数模拟测量之前请求的响应时间。根据测量到的响应时间,通过 limiter.SetLimit 设置不同的值来动态调整速率限制。这样,系统就能根据观察到的响应时间调整其流控策略。

结论
Jo Jo @Unsplash
Jo Jo @Unsplash

流控是保障 Go 应用程序稳定性和安全性的基本技术。通过有效控制传入请求的流量,可以防止资源耗尽并确保资源的公平分配。本文探讨了固定窗口和令牌桶流控的概念,并提供了代码片段,演示了如何基于 golang.org/x/time/rate 包实现流控策略,帮助读者将流控纳入应用程序,以构建能够高效处理不同流量水平的弹性系统。


你好,我是俞凡,在Motorola做过研发,现在在Mavenir做技术工作,对通信、网络、后端架构、云原生、DevOps、CICD、区块链、AI等技术始终保持着浓厚的兴趣,平时喜欢阅读、思考,相信持续学习、终身成长,欢迎一起交流学习。为了方便大家以后能第一时间看到文章,请朋友们关注公众号"DeepNoMind",并设个星标吧,如果能一键三连(转发、点赞、在看),则能给我带来更多的支持和动力,激励我持续写下去,和大家共同成长进步!

参考资料
[1]

Rate Limiting in Go: Controlling Traffic with Efficiency: https://towardsdev.com/rate-limiting-in-go-controlling-traffic-with-efficiency-6a5ef7444ef8

[2]

拒绝服务攻击: https://en.wikipedia.org/wiki/Denial-of-service_attack

本文由 mdnice 多平台发布

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/543252.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

springboot“涛宝”大学生二手物品交易商城

摘 要 二十一世纪我们的社会进入了信息时代&#xff0c;信息管理系统的建立&#xff0c;大大提高了人们信息化水平。传统的管理方式对时间、地点的限制太多&#xff0c;而在线管理系统刚好能满足这些需求&#xff0c;在线管理系统突破了传统管理方式的局限性。于是本文针对这一…

AlipayHK香港支付宝如何绑定香港卡?

想使用香港支付宝&#xff0c;那需要绑定香港卡&#xff0c;我这里使用的是438357&#xff0c;看下图 开卡地址&#xff0c;点击获取 开卡步骤按照图片步骤即可 这里要注意的是&#xff0c;一定要用香港网络才行&#xff0c;因为每个人的网络环境不一样&#xff0c;自己考虑清…

闪存盘和固态硬盘区别大吗?区别是什么

在数字化时代&#xff0c;存储设备是我们日常生活和工作中不可或缺的一部分。闪存盘和固态硬盘&#xff08;SSD&#xff09;作为两种常见的存储设备&#xff0c;它们在数据存储和传输方面都有着广泛的应用。然而&#xff0c;尽管它们都属于闪存技术&#xff0c;但在很多方面却存…

【C语言】字符(串)函数详解~

一、前言 这一期的博客&#xff0c;将会着重讲解常见的字符或字符串的相关库函数。C语言中有一组库函数专门用来处理字符类型的数据的&#xff0c;后文则会介绍字符分类函数以及字符转换函数。字符串相关的函数是本篇博客的重点&#xff0c;这也是为什么标题是字符串函数详解。…

【2024年5月备考新增】《软考真题分章练习 - 5 项目进度管理(高项)》

1、( ) is a technique for estimating the duration or cost of an activity or a project using historical data from a similar activity or project. A.Analogous estimating B. parametric estimating C.Three-Point estimating D. Bottom estimating 2、下图中(单位:…

k8s的pod和svc相互访问时网络链路解析

k8s的pod和svc相互访问时网络链路解析 1. k8s环境中pod相互访问1.1. k8s中pod相互访问的整体流程1.2. k8s的相同机器的不同pod相互访问1.3. k8s的不同机器的不同pod相互访问 2. k8s访问svc2.1 nat操作2.2 流量进入到后端pod 3. 疑问和思考3.1 访问pod相互访问为什么不用做nat?…

STL_vector详解和迭代器失效问题解释

文章目录 vector介绍vector的使用vector构造函数的使用vector迭代器的使用vector空间函数的使用vector的增删查改 关于迭代器失效问题 二次修订于date&#xff1a;2024&#xff1a;3&#xff1a;16 vector介绍 vector是一个大小动态可变的一个数组的序列容器。 动态可变自然就是…

C#控制台贪吃蛇

Console.Write("");// 第一次生成食物位置 // 随机生成一个食物的位置 // 食物生成完成后判断食物生成的位置与现在的蛇的身体或者障碍物有冲突 // 食物的位置与蛇的身体或者障碍物冲突了&#xff0c;那么一直重新生成食物&#xff0c;直到生成不冲突…

JVMJava虚拟机

JVM的内存区域 程序计数器&#xff1a; 字节码解释器通过改变程序计数器来依次读取指令&#xff0c;从而实现代码的流程控制&#xff0c;如&#xff1a;顺序执行、选择、循环、异常处理。 在多线程的情况下&#xff0c;程序计数器用于记录当前线程执行的位置&#xff0c;从而当…

跨境电商选品实战——Ownips公开数据信息安全采集+Python爬虫轻松搞定Lazada电商选品

文章目录 一、引言二、Lazada电商平台选品实战2.1、分析Lazada电商平台的商品列表接口2.2、定位商品列表计算逻辑2.3、封装高质量住宅IP2.4、运行爬虫 三、数据处理及选品分析四、Ownips——企业级全球静态住宅IP&#xff0c;高效采集公开数据 一、引言 互联网与外贸的结合&am…

AI对话/绘画完整系统(附完整源码,已开源)

文章目录 功能UI界面使用地址环境完整源码 功能 支持邮件激活账号&#xff0c;微信登录&#xff0c;短信登录支持上下文对话支持GPT4,claude3文件/图片分析分析&#xff0c;几乎所有模型均支持支持模糊匹配自定义回复消息支持按此按张按余额多种扣费方式支持套餐卡密生成及自定…

D6212——安防摄像头(IPC)的步进马达及IR-CUT驱动芯片

应用领域 安防摄像头&#xff08;IPC&#xff09;的步进马达及IR-CUT驱动。 02 功能介绍 D6212内置8路带有续流二极管的达林顿驱动管阵列和一个H桥驱动&#xff0c;单芯片即可实现2个步进电机和一个IR-CUT的直接驱动&#xff0c;使得电路应用非常简单。单个达林顿管在输入电压…