Redis_分片集群

10. 分片集群

10.1简介

业务场景,需要存储50G的数据。对于内存和硬盘配置不足,选用两种方式

  • 一种:纵向扩展:加内存,加硬盘,提高CPU。简单、直接。RDB存储效率要考虑。成本要考虑。
  • 二种:横向扩展:加实例。(加机器)

10.2配置

步骤1:

  • 创建一个mycluster目录,复制redis.conf文件
    mkdir mycluster
    cp /opt/redis-6.2.6/redis.conf redis.conf
    
  • 将后台启动打开

步骤2:

  • 创建一个redis6379.conf
    include redis.conf
    pidfile "/var/run/redis_6379.pid"
    port 6379
    dbfilename "dump6379.rdb"
    #打开集群模式
    cluster-enabled yes
    #设定节点配置文件
    cluster-config-file nodes-6379.conf
    #设定节点失联时间,超过,会自动进行主从切换
    cluster-node-timeout 15000
    

步骤3:

  • 根据6379的配置文件,再配置5个不同的端口
    :%S/原内容/要替换的内容
    :%s/6379/6380
    

步骤4:

  • 修改redis.conf配置文件,将bind ip地址加入
    在这里插入图片描述

    打开bind 127.0.0.1
    加入 192.168.188.3
    

步骤5

  • 启动六个服务,保证六个服务启动成功

步骤6

  • 将六个服务合成一个集群
    redis-cli --cluster create --cluster-replicas 1 192.168.188.3:6379
    192.168.188.3:6380 192.168.188.3:6381 192.168.188.3:6579 192.168.188.3:6580
    192.168.188.3:6581
    
  • 输入yes去接受配置

注意:
在这里插入图片描述
当出现此错误时,需要把redis.conf配置文件中的protected-mode no yes改为no,重启所有redis在执行步骤6
在这里插入图片描述

10.3 Hash Slot

10.3.1 简介

在使用redis cluster方案中,一个分片集群有16384个哈希槽。
根据键值对的key,按照CRC16算法计算一个16bit的值。再用这个值对16384取模运算,得到的数代表对应编号的hash slot

10.3.2部署方案

cluster create命令创建集群时,redis会自动把这些hash slot平均分布在集群实例上。如果集群中有N个实例(主库),每个实例上分配到的hash slot就是16384/N

使用cluster addslos 手工分配哈希槽。

10.4 集群中的数据操作

步骤1

  • 使用集群方式启动redis的命令行,加 -c参数
    redis-cli -c -p 6379
    

步骤2

  • 向redis中设置一个键值对,key会经过运算后,得到相应的hash slot进行存储
    set k1 v1
    set k2 v2
    get k1
    get k2
    

步骤3

  • 测试向集群中加入多个key-value,由于在不同的hash slot,此时会报错
    mset k3 v3 k4 v4 k5 v5
    
  • 要通过{}来定义组的概念,使用key中{}内相同内容的键值对放在一个slot中
mset name{user:001} zhangsan age{user:001} 18 gender{user:001} man

步骤4

  • 获取key中的值
    get k1
    get name{user:001}
    

10.5 常用命令

  • cluster nodes:显示集群节点的配置信息
  • cluster keyslot < key>:获取key的哈希槽
  • cluster countkeysinslot < slot>:返回当前哈希槽中key的数量(仅查询当前redis实例)
  • cluster getkeysinslot < slot>< count>:返回当前槽中指定的count数量的key

10.6 故障演示

步骤1

  • 将6379宕机,以集群方式登录6380
    127.0.0.1:6379>shutdown
    exit
    redis-cli -c -p 6380
    

步骤2:

  • 使用cluster nodes查看节点状态,6379的从机6581变成了主机

步骤3:

  • 把6379再次启动,启动后,6379变成了6581的从机

如果有一段hash slot的主从节点都宕机,redis是否继续工作?

通过下面配置,默认是yes,如果主从都挂掉,整个集群就都挂掉

如果是no,就表示该hash slot数据全部都不能使用,也无法存储

cluster-require-full-coverage yes

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/70709.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Java Persistence APl(JPA)——JPA是啥? SpringBoot整合JPA JPA的增删改查 条件模糊查询 多对一查询

目录 引出Jpa是啥&#xff1f;Jpa的使用创建实体类写dao接口类写服务类 crud增删改查增加修改根据id删除全查询分页查询 条件查询模糊查询单条件查询多条件查询模糊查询排序查询 多对一查询定义实体类auto主键策略下新增进行全查询测试 全部代码application.yml配置类pom配置文…

【Python】Web学习笔记_flask(5)——会话cookie对象

HTTP是无状态协议&#xff0c;一次请求响应结束后&#xff0c;服务器不会留下对方信息&#xff0c;对于大部分web程序来说&#xff0c;是不方便的&#xff0c;所以有了cookie技术&#xff0c;通过在请求和响应保温中添加cookie数据来保存客户端的状态。 html代码&#xff1a; …

电机故障诊断(python程序,模型为MSCNN结合LSTM结合注意力机制模型,有注释)

代码运行环境要求&#xff1a;TensorFlow版本>2.4.0&#xff0c;python版本>3.6.0 1.电机常见的故障类型有以下几种&#xff1a; 轴承故障&#xff1a;轴承是电机运转时最容易受损的部件之一。常见故障包括磨损、疲劳、过热和润滑不良&#xff0c;这些问题可能导致噪音增…

实时会话简易版

1、数据存储 Redis缓存、pgsql数据库 2、存储使用 2.1、Redis缓存 1&#xff09;无序集合set&#xff1a;存储未读会话id 2&#xff09;list&#xff08;左进右出&#xff09;&#xff1a;存储会话未读消息 2.2、pgsql数据库 存储用户信息&#xff0c;存储会话id&#…

【Apollo】Apollo 8.0系统下载指南

作者简介&#xff1a; 辭七七&#xff0c;目前大一&#xff0c;正在学习C/C&#xff0c;Java&#xff0c;Python等 作者主页&#xff1a; 七七的个人主页 文章收录专栏&#xff1a; 七七的闲谈 欢迎大家点赞 &#x1f44d; 收藏 ⭐ 加关注哦&#xff01;&#x1f496;&#x1f…

机器学习基础笔记

文章目录 1.机器学习简介1.1 机器学习的一般功能1.2 机器学习的应用1.3 机器学习的方法1.4 机器学习的种类1.5 机器学习的常用框架 2. Spark机器学习2.1 MLlib介绍2.2 MLlib的数据格式2.2.1 本地向量2.2.2 标签数据 2.3 MLlib与ml2.4 MLlib的应用场景 3.Spark环境搭建4.向量与矩…

VectorStyler for Mac: 让你的创意无限绽放的全新设计工具

VectorStyler for Mac是一款专为Mac用户打造的矢量设计工具&#xff0c;它结合了功能强大的矢量编辑器和创意无限的样式编辑器&#xff0c;让你的创意无限绽放。 VectorStyler for Mac拥有直观简洁的用户界面&#xff0c;让你能够轻松上手。它提供了丰富的矢量绘图工具&#x…

JS-SDK(微信扫一扫生成签名)

目录 一、简介(JS-SDK使用权限签名算法)1、jsapi_ticket2、签名算法 二、js1、导入相关JS2、页面触发扫码元素3、相关JS代码(参数以自己的为标准&#xff0c;如下只是举例) 三、后端接口(根据所需选一中即可)1、.jsp文件写法2、.java文件写法3、注意事项 确保有 调起微信扫一扫…

搭建Web服务器并用cpolar发布至公网访问

本地电脑搭建Web服务器并用cpolar发布至公网访问 文章目录 本地电脑搭建Web服务器并用cpolar发布至公网访问前言1. 首先在电脑安装PHPStudy、WordPress、cpolar2. 安装cpolar&#xff0c;进入Web-UI界面3. 安装wordpress4. 进入wordpress网页安装程序5. 利用cpolar建立的内网穿…

【多目标跟踪】 FairMOT 耗时三天!!!单句翻译

多目标跟踪 FairMOT Abstract Multi-object tracking (MOT) is an important prob-lem in computer vision which has a wide range of applica-tions. Formulating MOT as multi-task learning of object de-tection and re-ID in a single network is appealing since ital…

面试八股文Mysql:(2)数据库调优

1. SQL优化很有必要 数据库优化在提升系统性能是很重要的一个方面&#xff0c;不管是MySQL还是MongoDB还是其它的数据库。 SQL优化在提升系统性能中是成本最低 && 优化效果最明显的途径&#xff0c;可以让吞吐量更大&#xff0c;响应速度更快。如果你的团队在SQL优化这…

【0基础学爬虫】爬虫基础之网络请求库的使用

大数据时代&#xff0c;各行各业对数据采集的需求日益增多&#xff0c;网络爬虫的运用也更为广泛&#xff0c;越来越多的人开始学习网络爬虫这项技术&#xff0c;K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章&#xff0c;为实现从易到难全方位覆盖&#xff0c;特设【0基础学…