使用 INFINI Gateway 保护 Elasticsearch 集群之修改查询不合理参数(二)

news/2025/3/17 23:53:41/文章来源:https://www.cnblogs.com/infinilabs/p/18778023

本文将探讨如何使用 INFINI Gateway 修改查询不合理的参数,此方法同样适用于 Opensearch 和 Easysearch 。

在之前的文章中,我们介绍了如何使用 request_body_json_set 处理器修改不合理的查询参数,本篇将继续探讨如何使用 request_body_regex_replace 处理器修改不合理参数。

试想一下有下面两种查询,如果只想修改第二个查询的 size 到 10 该如何做?

# 查询1
GET test/_search
{"size": 100,"query": {"match": {"test": "test"}}
}#查询2
GET test/_search
{"size": 10000,"query": {"match": {"test": "test2"}}
}

如果要继续使用 request_body_json_set 处理器则必须加上条件判断。如果使用 request_body_regex_replace 处理器则可以直接筛选出要修改的数据进行修改。

request_body_regex_replace

INFINI Gateway 的 request_body_regex_replace 过滤器使用正则表达式来替换请求体正文的字符串内容。上面的查询我们可以修改 INFINI Gateway 的默认配置增加 request_body_regex_replace 部分如下。

flow:- name: default_flowfilter:- request_body_json_regex_replace:pattern: '"size": 10000'to: '"size": 10'- elasticsearch:elasticsearch: prodmax_connection_per_node: 1000

上面的配置会搜索查询请求体中是否含有 "size": 10000 字符串,一旦找到该字符串就替换为 "size": 10 字符串。

修改效果

使用 request_body_regex_replace 处理后的语句如下。

{{% load-img "/img/blog/2025/modifying-unreasonable-queries-using-gateway-part2/1.jpg" "" %}}

可以看到我们成功地修改了查询参数。再比如我们想修改应用查询的条件,这通常需要调整应用代码,也比较耗时。通过本文中的方法可快速达到修改查询条件的目的。

比如应用发送查询如下:

GET test/_search
{"query": {"bool": {"filter": [{"term": {"category": "car" }}],"must": [{"term": {"brand": {"value": "lining" }}}]}}
}

上面查询本意是查询品牌为 lining 的服饰,类别却写成了 car。可以通过 request_body_regex_replace 将类别改成 clothing,对应的配置文件如下。

flow:- name: default_flowfilter:- request_body_regex_replace:pattern: '"category": "car"'to: '"category": "clothing"'- elasticsearch:elasticsearch: prodmax_connection_per_node: 1000

上面的配置会搜索查询请求体中是否含有 "category": "car" 字符串,一旦找到该字符串就替换为 "category": "clothing" 字符串。

不难看出 request_body_regex_replace 处理器非常灵活,大家根据情况选择使用 request_body_regex_replace 和 request_body_json_set 处理器。

关于极限网关(INFINI Gateway)

INFINI Gateway 是一个开源的面向搜索场景的高性能数据网关,所有请求都经过网关处理后再转发到后端的搜索业务集群。基于 INFINI Gateway,可以实现索引级别的限速限流、常见查询的缓存加速、查询请求的审计、查询结果的动态修改等等。

官网文档:https://docs.infinilabs.com/gateway/main/
开源地址:https://github.com/infinilabs/gateway

作者:杨帆,极限科技(INFINI Labs)高级解决方案架构师、《老杨玩搜索》栏目 B 站 UP 主,拥有十余年金融行业服务工作经验,熟悉 Linux、数据库、网络等领域。目前主要从事 Easysearch、Elasticsearch 等搜索引擎的技术支持工作,服务国内私有化部署的客户。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/900680.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

11判断

C 语言把任何非零和非空的值假定为 true,把零或 null 假定为 false。判断语句语句 描述if 语句 一个 if 语句 由一个布尔表达式后跟一个或多个语句组成。if...else 语句 一个 if 语句 后可跟一个可选的 else 语句,else 语句在布尔表达式为假时执行。嵌套 if 语句 您可以在一个…

2.4G 5G 频率 Wi-Fi 信道 All In One

2.4G & 5G 频率 Wi-Fi 信道 All In One2.4G & 5G 频率 Wi-Fi 信道 All In One demos荣耀路由 XD28Wi-Fi 信道:以无线信号作为传输媒体的数据信号传送通道,若选“自适应”,则路由器会根据周围环境选择一个最好的信道。 模式:设置路由器的无线工作模式。2.4G Wi-Fi 推…

win系统部署deepseek、ollama,修改模型路径

安装ollama 1、ollama官网下载对应版本的安装包:https://ollama.com/download 2、ollama默认安装到C盘,如果希望自定义安装路径,可以考虑该命令:OllamaSetup.exe /DIR=路径, 比如我想安装到D:\ollama文件下,我要在D盘下创建ollama文件夹,并将Ollama的安装包放在里面,然…

Power Apps 技术分享:画布应用使用表单控件

前言表单控件,是画布应用里一个非常好用的控件,我们今天简单介绍下,如何使用这个控件。正文1.首先,我们需要有一个数据源,我们这里用上一篇博客新建的数据源,如下图:2.新建一个页面,在页面里添加表单控件,也就是编辑窗体(这个中文的翻译啊,一言难尽),如下图:3.为…

P4569 [BJWC2011] 禁忌♂题解

传送门 我的板蓝根 前言 这个题的数据范围及其出卖解法,其实很简单。 题目大意 定义一个字符串的权值为将其分割后子串与 \(N\) 个文本串相等个数的最大值,求:在由前 \(alphabet\) 个小写字母组成的长度为 \(len\) 的任意字符串中随机选择出的字符串的期望权值。 题解 看到这…

微服务存在的问题及解决方案

微服务存在的问题及解决方案 1. 存在问题 1.1 接口拖慢 因为一个接口在并发时,正好执行时长又比较长,那么当前这个接口占用过多的 Tomcat 连接,导致其他接口无法即时获取到 Tomcat 连接来完成请求,导致接口拖慢,甚至失败。 假如商品服务业务并发较高,占用过多 Tomcat 连接…

Esay_log移植

1. 目录结构demo 包含多平台移植示例,如 Linux、RT-Thread、裸机系统等,提供实际工程参考,帮助开发者快速适配不同环境。docs 存放中英文文档,详细说明库的配置、API 接口、移植方法及插件扩展机制。关键文档包括:api/kernel.md:核心接口函数定义及使用说明。port/kernel…

The sunshine in my life--Sun Yingsha

Have you ever been stuck in the mud, unable to move? I was once that person until Sun Yingsha’s story illuminated my path. During the epidemic period, exposed to various electronic devices, I was addicted to online games. Time slipped through my fingers …

工具-typora 字数太多卡顿问题

进入设置打开高级设置在文件夹中编辑 配置文件修改 flags 后面的内容 "flags": [] 为 "flags": [["disable-gpu"],] 如图保存后重启 typora

Python实验一报告

学号 20233309 《Python程序设计》实验一报告课程:《Python程序设计》班级:2333姓名:侯成子学号:20233309实验教师:王志强实验日期:2025年3月12日必修/选修:公选课一、实验内容1.熟悉Python开发环境;2.练习Python运行、调试技能;3.编写程序,练习变量和类型、字符串…

第03章 基本的SELECT语句

第03章 基本的SELECT语句 1. SQL概述 1.1 SQL背景知识SQL(Structured Query Language,结构化查询语言)是使用关系模型的数据库应用语言。 SQL有两个重要的标准:SQL92和SQL99。1.2 SQL分类DDL(Data Definition Languages):定义数据库对象,这些语句定义了不同的数据库、表…