对前端限流操作(Redis版本)4种算法

固定时间窗口算法

  • 固定时间窗口算法也可以叫做简单计数算法。网上有很多都将计数算法单独抽离出来。但是笔者认为计数算法是一种思想,而固定时间窗口算法是他的一种实现
  • 包括下面滑动时间窗口算法也是计数算法的一种实现。因为计数如果不和时间进行绑定的话那么失去了限流的本质了。就变成了拒绝了

在这里插入图片描述

优点

  • 在固定的时间内出现流量溢出可以立即做出限流。每个时间窗口不会相互影响
  • 在时间单元内保障系统的稳定。保障的时间单元内系统的吞吐量上限

缺点

  • 正如图示一样,他的最大问题就是临界状态。在临界状态最坏情况会受到两倍流量请求
  • 除了临界的情况,还有一种是在一个单元时间窗内前期如果很快的消耗完请求阈值。那么剩下的时间将会无法请求。这样就会因为一瞬间的流量导致一段时间内系统不可用。这在互联网高可用的系统中是不能接受的。

实现

	@Autowiredprivate StringRedisTemplate redisTemplate;// 固定时间窗口算法@GetMapping("/start")public Map<String, Object> start(@RequestParam Map<String, Object> paramMap) {//根据前端传递的qps上线int times = 100;if (paramMap.containsKey("times")) {times = Integer.parseInt(paramMap.get("times").toString());}String redisKey = "redisQps";RedisAtomicInteger redisAtomicInteger = new RedisAtomicInteger(redisKey, Objects.requireNonNull(redisTemplate.getConnectionFactory()));int no = redisAtomicInteger.getAndIncrement();//设置时间固定时间窗口长度 1Sif (no == 0) {redisAtomicInteger.expire(1, TimeUnit.SECONDS);}//判断是否超限  time=2 表示qps=3log.info("no值->{}",no);if (no > times) {throw new RuntimeException("qps refuse request");}log.info("times值->{}",times);//返回成功告知Map<String, Object> map = new HashMap<>();map.put("success", "success");return map;}

测试

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

滑动时间窗口算法

滑动时间窗口算法是一种限流算法,其原理是记录一段时间内的请求数量,并根据时间窗口的滑动来判断是否接受新的请求。该算法通过维护一个滑动窗口来记录时间窗口内的请求数量,并根据窗口的大小和限流阈值来决定是否接受新的请求。

滑动时间窗口算法的实现方式相对复杂一些,但相对于固定时间窗口算法更加灵活和精确。在滑动时间窗口算法中,时间窗口是不断滑动的,每个窗口的大小和起点可以根据实际需求进行配置。同时,该算法也支持动态调整限流阈值和流量控制粒度,能够更好地应对流量波动和突发请求的情况。

滑动时间窗口算法的核心思想是通过维护一个时间窗口内的请求计数器,并根据时间窗口的滑动来判断是否接受新的请求。具体来说,当一个新的请求到达时,算法会根据当前时间点判断该请求属于哪个时间窗口,并更新对应窗口的计数器。如果计数器已经达到了限流阈值,则拒绝该请求;否则,接受该请求。随着时间的推移,时间窗口会不断滑动,并更新计数器的值。

滑动时间窗口算法相对于固定时间窗口算法更加灵活和精确,能够更好地应对流量波动和突发请求的情况。同时,该算法也支持动态调整限流阈值和流量控制粒度,能够更好地满足实际需求。在实际应用中,需要根据具体情况选择适合的限流算法来控制流量。

优点

滑动时间窗口算法的优点主要包括以下几点:

  1. 灵活性和可配置性强:滑动时间窗口算法的时间窗口大小和起点可以根据实际需求进行配置,同时限流阈值也可以动态调整,这使得算法能够更好地应对流量波动和突发请求的情况。
  2. 精度高:滑动时间窗口算法相对于固定时间窗口算法更加精确,因为它考虑了时间窗口内的请求数量和时间点,能够更好地反映请求的实际情况。
  3. 支持多维度限流:滑动时间窗口算法可以支持多维度的限流,例如根据IP地址、用户ID、接口等不同维度进行限流,这使得算法能够更加精细地控制流量。

缺点

然而,滑动时间窗口算法也存在一些缺点:

  1. 实现复杂度高:滑动时间窗口算法的实现相对复杂,需要维护一个滑动窗口来记录时间窗口内的请求数量,并不断更新窗口的值,这需要耗费更多的计算和存储资源。
  2. 内存占用大:由于滑动时间窗口算法需要记录每个时间窗口内的请求数量和时间点,因此需要占用更多的内存资源。
  3. 无法平滑地实现请求流量的控制:滑动时间窗口算法只能通过控制时间段来控制请求总量,无法平滑地实现请求流量的控制,这可能会影响到用户体验和系统的稳定性。

实现

  • 滑动时间窗口是将时间更加细化,上面我们是通过redis#setnx实现的。这里我们就无法通过他统一记录了。我们应该加上更小的时间单元存储到一个集合汇总。然后根据集合的总量计算限流。redis的zsett数据结构就和符合我们的需求。
  • 为什么选择zset呢,因为redis的zset中除了值以外还有一个权重。会根据这个权重进行排序。如果我们将我们的时间单元及时间戳作为我们的权重,那么我们获取统计的时候只需要按照一个时间戳范围就可以了。
  • 因为zset内元素是唯一的,所以我们的值采用uuid或者雪花算法一类的id生成器
// 滑动时间窗口算法@GetMapping("/startList")public Map<String, Object> startList(@RequestParam Map<String, Object> paramMap) {String redisKey = "qpsZset";Integer times = 100;if (paramMap.containsKey("times")) {times = Integer.valueOf(paramMap.get("times").toString());}long currentTimeMillis = System.currentTimeMillis();long interMills = 10000L;Long count = redisTemplate.opsForZSet().count(redisKey, currentTimeMillis - interMills, currentTimeMillis);// 检查QPS(Queries Per Second)是否超过限制/*** 使用System.currentTimeMillis()获取当前时间戳。* 设置一个时间间隔interMills为1000毫秒(即1秒)。* 使用redisTemplate.opsForZSet().count(redisKey, currentTimeMillis - interMills, currentTimeMillis)查询过去1秒内Redis ZSet中指定键(redisKey)的数量。这个数量会被赋值给count变量。* 如果count的值大于times,则抛出一个运行时异常,表示QPS超过限制*/if (count > times) {throw new RuntimeException("qps refuse request");}redisTemplate.opsForZSet().add(redisKey, UUID.randomUUID().toString(), currentTimeMillis);Map<String, Object> map = new HashMap<>();map.put("success", "success");return map;}

在这里插入图片描述

漏桶算法

漏桶算法是一种常用于流量控制和限流的算法,其核心思想是将突发流量整形以便为网络提供一个稳定的流量。

漏桶算法可以看作是一个带有常量服务时间的单服务器队列,如果漏桶(包缓存)溢出,那么数据包会被丢弃。在网络中,漏桶算法可以控制端口的流量输出速率,平滑网络上的突发流量,实现流量整形,从而为网络提供一个稳定的流量。

漏桶算法的实现相对简单,不需要复杂的数据结构或计算,易于理解和部署。其优点包括平滑处理流入系统的请求,以恒定的速率将请求处理释放,从而避免了突发请求对系统的冲击;控制精度高,可以通过调整漏桶的出水速率来精确地控制请求的处理速度;适用于需要平滑处理流量和避免突发请求的场景,例如网络流量控制、防止DDOS攻击等。

然而,漏桶算法也存在一些缺点,例如请求延迟,可能导致某些请求的响应时间变长;不适用于实时性要求高的场景,因为请求需要按照恒定速率进行处理,无法满足即时性要求;无法应对突发流量,因为漏桶的出水速率是固定的,无法根据流量的变化进行动态调整。

在这里插入图片描述

优点

  • 面对限流更加的柔性,不在粗暴的拒绝。
  • 增加了接口的接收性
  • 保证下流服务接收的稳定性。均匀下发

实现

    // 漏桶算法@GetMapping("/startLoutong")public Map<String, Object> startLoutong(@RequestParam Map<String, Object> paramMap) {String redisKey = "qpsList";Integer times = 100;if (paramMap.containsKey("times")) {times = Integer.valueOf(paramMap.get("times").toString());}Long size = redisTemplate.opsForList().size(redisKey);// 检查队列长度是否超过限制if (size >= times) {throw new RuntimeException("qps refuse request");}// 添加请求到队列Redis列表的右侧。Long aLong = redisTemplate.opsForList().rightPush(redisKey, String.valueOf(paramMap));if (aLong > times) {//为了防止并发场景。这里添加完成之后也要验证。  即使这样本段代码在高并发也有问题。此处演示作用// 修剪Redis列表,使其长度为timesredisTemplate.opsForList().trim(redisKey, 0, times - 1);throw new RuntimeException("qps refuse request");}Map<String, Object> map = new HashMap<>();map.put("success", "success");return map;}

模拟消费

@Component
@Slf4j
public class SchedulerTask {@Autowiredprivate StringRedisTemplate redisTemplate;@Scheduled(cron = "*/5 * * * * ?")private void process() {//一次性消费两个log.info("正在消费。。。。。。");String redisKey = "qpsList";redisTemplate.opsForList().trim(redisKey, 2, -1);}}

测试

在这里插入图片描述

令牌桶算法

  • 令牌桶和漏桶法是一样的。只不过将桶的作用方向改变了一下。
  • 漏桶的出水速度是恒定的,如果流量突然增加的话我们就只能拒绝入池
  • 但是令牌桶是将令牌放入桶中,我们知道正常情况下令牌就是一串字符当桶满了就拒绝令牌的入池,但是面对高流量的时候正常加上我们的超时时间就留下足够长的时间生产及消费令牌了。这样就尽可能的不会造成请求的拒绝
  • 最后,不论是对于令牌桶拿不到令牌被拒绝,还是漏桶的水满了溢出,都是为了保证大部分流量的正常使用,而牺牲掉了少部分流量

实现

    // 令牌桶算法@GetMapping("/startLingpaitong")public Map<String, Object> startLingpaitong(Map<String, Object> paramMap) {String redisKey = "lingpaitong";String token = redisTemplate.opsForList().leftPop(redisKey);//正常情况需要验证是否合法,防止篡改if (StringUtils.isEmpty(token)) {throw new RuntimeException("令牌桶拒绝");}Map<String, Object> map = new HashMap<>();map.put("success", "success");return map;}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/475092.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【算法】基础算法002之滑动窗口(一)

&#x1f440;樊梓慕&#xff1a;个人主页 &#x1f3a5;个人专栏&#xff1a;《C语言》《数据结构》《蓝桥杯试题》《LeetCode刷题笔记》《实训项目》《C》《Linux》《算法》 &#x1f31d;每一个不曾起舞的日子&#xff0c;都是对生命的辜负 目录 前言 1.长度最小的子数组…

CompletableFuture在RocketMQ中的使用实战!

今天想跟大家来聊一聊JDK1.8提供的异步神器CompletableFuture&#xff0c; 最后呢我会结合RocketMQ源码分析一下CompletableFuture的使用。 Future接口以及它的局限性 FutureTask<String> futureTask new FutureTask<>(() -> "三友");new Thread(f…

半导体光伏光电行业为什么选用PFA酸缸浸泡清洗硅片

PFA清洗槽是即四氟清洗桶后的升级款&#xff0c;专为半导体光伏光电等行业设计&#xff0c;一体成型&#xff0c;无需担心漏液。主要用于浸泡、清洗带芯片硅片电池片的花篮。由于PFA的特点它能耐受清洗溶液的腐蚀性&#xff0c;同时金属元素空白值低&#xff0c;无溶出无析出&a…

python自学...

一、稍微高级一点的。。。 1. 闭包&#xff08;跟js差不多&#xff09; 2. 装饰器 就是spring的aop 3. 多线程

搭建智能调度系统:同城代驾小程序的开发教学

当下&#xff0c;同城代驾服务越来越受到人们的青睐。为了满足市场需求&#xff0c;许多企业开始开发智能调度系统&#xff0c;以提高服务效率和用户体验。本文将介绍如何搭建一个智能调度系统&#xff0c;并以同城代驾小程序的开发为例进行详细教学。 第一步&#xff1a;需求…

【大厂AI课学习笔记】【2.2机器学习开发任务实例】(1)搭建一个机器学习模型

今天学习的是&#xff0c;如何搭建一个机器学习模型。 主要有以上的步骤&#xff1a; 原始数据采集特征工程 数据预处理特征提取特征转换&#xff08;构造&#xff09;预测识别&#xff08;模型训练和测试&#xff09; 在实际工作中&#xff0c;特征比模型更重要。 数据和特征…

基于51单片机的智能台灯的设计与实现

摘 要:针对青少年因坐姿不正确、灯光亮度不合适、用眼过度等原因易导致的近视问题,文中提出使用51单片机作为主控制单元,选用红外检测、光敏检测、蓝牙通信、蜂鸣器和模数转换等模块,设计了一款智能台灯。该智能台灯具有节能、预防近视等功能。经测试,该台灯具有保护视力的…

MySQL DQL 基本查询

一.概念 数据查询不应只是简单返回数据库中存储的数据&#xff0c;还应该根据需要对数据进行筛选以及确定数据以什么样的格式显示。 二.语法格式 select 列名 from 表 where 条件 1.查询所有的商品 select * from product; 2.查询商品名和商品价格 select pname,price from…

介绍7款免费的最佳地图/导航/定位/GIS开源项目

文章目录 1、xdh-map新德汇地图应用类库1.1、独立引用1.2、与MyUI结合使用1.3、快速上手1.3.1、采用项目工程模板创建项目【推荐】1.3.2、 调用组件库功能 2、蚂蚁金服AntV-L7地理空间数据可视分析引擎2.1、AntV-L7简介2.2、核心特性2.3、支持丰富的图表类型2.4、如何使用2.4.1…

林浩然与杨凌芸的Java集合奇遇记

林浩然与杨凌芸的Java集合奇遇记 The Java Collection Chronicles of Lin Haoran and Yang Lingyun 在一个充满代码香气的午后&#xff0c;程序员男主角林浩然正在他的编程世界里挥舞着键盘剑&#xff0c;探索Java王国中的神秘宝藏——集合。而我们的女主角杨凌芸&#xff0c;作…

深入浅出了解谷歌「Gemini大模型」发展历程

Google在2023年12月官宣了Gemini模型&#xff0c;随后2024年2月9日才宣布Gemini 1.0 Ultra正式对公众服务&#xff0c;并且开始收费。现在2024年2月14日就宣布了Gemini 1.5 Pro&#xff0c;史诗级多模态最强MoE首破100万极限上下文纪录&#xff01;&#xff01;&#xff01;Gem…

基于SpringBoot+WebSocket+Spring Task的前后端分离外卖项目-订单管理(十七)

订单管理 1. Spring Task1.1 介绍1.2 cron表达式1.3 入门案例1.3.1 Spring Task使用步骤1.3.2 代码开发1.3.3 功能测试 2.订单状态定时处理2.1 需求分析2.2 代码开发2.3 功能测试 3. WebSocket3.1 介绍3.2 入门案例3.2.1 案例分析3.2.2 代码开发3.2.3 功能测试 4. 来单提醒4.1 …