elasticsearch 同义词管理热更新

背景

项目有需要做一个同义词搜索的功能,就去研究了下es的同义词搜索功能,踩了不少坑记录下

同义词本地文件读取方式

如果只是需要同义词搜索,不需要管理和更新,es本体就能支持,我踩的坑基本也不在这,就不具体说了,参考这个就好了https://blog.csdn.net/qq_40592041/article/details/108006994

使用(dynamic-synonym)插件远程热词更新

拉取仓库代码

插件仓库地址https://github.com/bells/elasticsearch-analysis-dynamic-synonym
gitee有克隆的仓库,github连不上可以去gitee找找

根据自己的es版本打包

查询es版本直接请求es ip+端口就行

http://127.0.0.1:9200/

返回的json version里面就是版本

{"name" : "e8d7d490ec4f","cluster_name" : "elasticsearch","cluster_uuid" : "Hf1KFT2bSnaW00s9eLSK4Q","version" : {"number" : "7.4.2","build_flavor" : "default","build_type" : "docker","build_hash" : "2f90bbf7b93631e52bafb59b3b049cb44ec25e96","build_date" : "2019-10-28T20:40:44.881551Z","build_snapshot" : false,"lucene_version" : "8.2.0","minimum_wire_compatibility_version" : "6.8.0","minimum_index_compatibility_version" : "6.0.0-beta1"},"tagline" : "You Know, for Search"
}

找到pom文件修改version版本和es版本一致
修改version
这个时候有个问题,部分版本回出现打包失败的问题,第一种解决方案是去git提交历史里找最接近的版本,比如我是7.4.2版本,我找的就是支持7.7.0的提交记录,回滚代码到对应记录,在改version为7.4.2打包
提交历史
打包后运行发现还是有问题,会报NoSuchMethodError,说output不存在,于是我把git记录往后推,到了改版本前,这个时候打包也会报output找不到的问题,这个时候把代码里报错的outputs(),改成outputs,不是调方法,而是掉对象,在打包就行了
打完包后在\target\releases文件夹中有个压缩包,解压上传到es的plugins文件夹里新建的dynamic-synonym文件夹就行
然后重启es,我这边是docker部署的,直接docker restart就行

服务端代码

我这边为了测试是给的死数据,后续需要按需修改,一开始我以为只要有放回就行,后来发现还需要对head做处理才行

 @GetMapping("/getActive")public String getActiveEsSynonyms(HttpServletRequest request, HttpServletResponse response) {String result = "";String eTag = request.getHeader("If-None-Match");String modified = request.getHeader("If-Modified-Since");String currentDate = DateUtils.getTime();System.out.println("加载ik同义词,上次同义词:" + eTag + ",上次修改时间:" + modified + ",当前日期:" + currentDate);//        if (!currentDate.equals(modified)) {String oldSynonym = 2+"";//            System.out.println("加载ik同义词,当前同义词数:"+2);
//            if (!oldSynonym.equals(eTag)) {// 获取数据库同义词
//                List<Synonym> all = synonymService.all();
//                StringBuilder words = new StringBuilder();
//                for (Synonym synonym : all) {
//                    // 可以使用“=>”方式或者直接“,”分割形式,自行考虑应用场景
//                    String theWord = StringUtils.join(synonym.getWords(), " => ", synonym.getSynonymWords());
//                    words.append(theWord);
//                    words.append("\n");
//                }eTag = oldSynonym;modified = currentDate;result = "苹果,手机\nns,游戏机";
//            }
//        }//更新时间response.setHeader("Last-Modified", modified);response.setHeader("ETag", eTag);response.setHeader("Content-Type", "text/plain");return result;}

设置es索引

如果是新建索引直接新建就好

PUT test
{"settings": {"index": {"number_of_shards": "3","number_of_replicas": "1","max_result_window": "200000","analysis": {"filter": {"remote_synonym": {"type": "dynamic_synonym","synonyms_path": "http://ip:port/synonyms/getActive","interval": 30},"local_synonym": {"type": "dynamic_synonym","synonyms_path": "synonym.txt"}},"analyzer": {"ik_max_syno": {"type": "custom","tokenizer": "ik_max_word","filter": ["remote_synonym"]}}}}},"mappings": {"properties": {"keyword": {"type": "text","analyzer": "ik_max_syno"}}}
}

如果是已有索引要修改,我的操作是先新建一个结构一样的索引,在把数据复制过去,在删除原索引,新建原索引,数据复制回去,删除新索引
删除索引命令

DELETE test

数据复制命令

POST _reindex
{"source": {"index": "原索引"},"dest": {"index": "目标索引"}
}

测试

添加数据后测试,搜索苹果能出现手机就说明没问题了

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/457315.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

CleanMyMac2024如何识别并清理垃圾文件?

CleanMyMac识别并清理垃圾文件的过程主要依赖于其强大的扫描功能和智能算法。以下是具体的步骤&#xff1a; 扫描垃圾文件&#xff1a;首先&#xff0c;用户需要打开CleanMyMac软件&#xff0c;并点击“智能扫描”功能。然后&#xff0c;软件将开始自动扫描Mac系统上的各种垃圾…

幻兽帕鲁怎么样?好玩? Mac版的玩《幻兽帕鲁》也很简单,只需三个步骤

幻兽帕鲁怎么样 幻兽帕鲁是一款集合了多种游戏元素的游戏&#xff0c;它巧妙地融合了《方舟:生存进化》的野外生存挑战、《荒野之息》的开放世界探索、《魔兽世界》的多元角色互动以及宝可梦的精灵捕捉与培养等经典游戏元素。游戏的核心系统是「帕鲁」捕获&#xff0c;你可以让…

Vue3父子组件传参

一&#xff0c;父子组件传参&#xff1a; 应用场景&#xff1a;父子组件传参 Vue3碎片&#xff1a;defineEmits&#xff0c;defineProps&#xff0c;ref&#xff0c;reactive&#xff0c;onMounted 1.父组件传子组件 a.父组件传参子组件 import { ref} from vue import OnChi…

C++PythonC# 三语言OpenCV从零开发(8):图像平滑处理

文章目录 相关链接前言图像资源图像平滑处理图像学知识补充(重点)什么是卷积什么是图像滤波什么是方框滤波和均值滤波 代码PythonCCsharp 总结 相关链接 C&Python&Csharp in OpenCV 专栏 【2022B站最好的OpenCV课程推荐】OpenCV从入门到实战 全套课程&#xff08;附带课…

简单实验 spring cloud gateWay 路由实验 实验

1.概要 1.1 说明 微服务统一网关实验&#xff0c;这里简单实验一下路由的功能 1.2 实验步骤&#xff0c;使用下面这个工程作为基础工程添加了一个gateWay做如下使用 简单实践 spring cloud nacos nacos-server-2.3.0-CSDN博客 2 代码 2.1 工程文件 <?xml version&quo…

艺术创作和生活的关系

艺术出现在生产劳作中并体现出人们生活、工作、学习中&#xff0c;使人们在不受限制随意发挥缔造发明能力的体现&#xff0c;独立的精神活动领域在它逐渐演变进步的历程中越来越明显&#xff0c;也是一个人精神思想生活中很重要的一部分。艺术随着社会发展而发展。一件完美的艺…

微信小程序解决华为手机保存图片到相册失败

1.新增隐私设置 2.优化代码 新增uni.authorize判断 _saveCode() {let that this;console.log(点击了保存图片)console.log(this.result)uni.authorize({scope: scope.writePhotosAlbum,success(e) {console.log(e)if (this.result ! "") {uni.saveImageToPhotosAlb…

echarts 一条折线图上显示不同颜色

文档树懒学堂&#xff1a;ECharts visualMap 代码实例及对应注释 - 树懒学堂 封装的echarts 组件代码&#xff1a; <template> <div :style"{ height: 100% }"> <div class"foldLine" ref"foldLine" :style"{ width: width…

UE4 C++ 动态加载类和资源

动态加载类和资源&#xff1a;指在运行时加载 .cpp void AMyActor::BeginPlay() {Super::BeginPlay();//动态加载资源UStaticMesh* MyTempStaticMesh LoadObject<UStaticMesh>(nullptr,TEXT("/Script/Engine.StaticMesh/Game/StarterContent/Shapes/Shape_NarrowC…

「云原生可观测团队」获选「InfoQ 年度技术内容贡献奖」

随着云原生、人工智能逐渐成为各行各业的创新生产力工具。可以预见&#xff0c;我们即将进入全新的智能化时代。随着数据成为新型生产要素&#xff0c;云和 AI 正走向深度融合。云原生通过提供大规模多元算力的高效供给&#xff0c;可观测成为业务创新的核心基础设施&#xff0…

详解C++类和对象(中(类的6个默认成员函数))

文章目录 写在前面1. 类的6个默认成员函数2. 构造函数2.1 构造函数的引入2.1 构造函数的特性 3. 析构函数3.1 析构函数的引入3.2 析构函数的特性 4. 拷贝构造函数4.1 拷贝构造函数概念4.2 拷贝构造函数的特性4.3 拷贝构造函数典型调用场景 5. 赋值运算符重载5.1 运算符重载5.2 …

智慧城市:打造低碳未来,引领城市数字化转型新篇章

在“万物皆可数字化”的新时代浪潮下&#xff0c;智慧城市作为未来城市发展的先锋方向&#xff0c;正在以前所未有的速度和规模重塑我们的城市面貌。 智慧城市不仅是一个技术革新的标志&#xff0c;更是城市治理、民生服务等领域全面升级的重要引擎。 一、智慧城市的多元应用领…