MongoDB部署策略

本文介绍了MongoDB数据库的优点的数据存储模式的安装部署过程。

利用MongoDB在存储海量数据上的优势,部署存储空间大数据。

·欢迎批评指正补充

由于编者水平有限,所搜集资料也很有限,制定的规范肯定有考虑不周全、甚至完全错误的地方,欢迎大家批评指正。这些内容肯定很不全面,有什么好的原则、经验,也欢迎补充。

  • 安装MongoDB

MongoDB官方已经发布了Win,Linux,MAC ,Solaris 4种平台的发布包,最新的版本是3.2.3,MongoDB遵循了偶数版本较为稳定的发布策略,这里推荐下载(2.4.x,2.6.x,3.0.x)版本。(安装版本推荐使用64位版本,因为MongoDB自身并不管理内存,这些工作都是交由操作系统完成,所以寻址空间只支持2.8G,同时MongoDB的性能与内存大小有直接关联)下载地址是http://www.mongodb.org/downloads

      1. 解压

下载完成后,解压,就可以直接运行bin目录下的二进制文件,一般意义上的安装MongoDB,就是安装MongoDB的服务端进程mongod,如图1-1所示。

图1-1 解压后的文件

      1. 配置目录环境(win平台为例)

bin目录下的mongod.exe在运行时需要配置数据文件目录,如:D:\mongodb\db_rs0\data\rs0_0;同时指定一个日志接收文件,如: D:\mongodb\db_rs0\logs\1.log;配置服务配置文件的路径,如:D:\mongodb\db_rs0\logs,也可以直接运行下列命令>mongod -- dbpath D:/mongodb\db_rs0\data\rs0_0 ,Linux下的安装可以利用对应的包管理器,系统自动创建目录和日志文件。

      1. 集群配置(复制集)

Mongo复制集的配置:

复制集操作实现了数据库的冗余,用于数据从故障中的恢复,同时以复制集的冗余也保证了分片功能的稳定。

一般来说,一个复制集至少需要3个节点,每个节点都是mongod的一个实例,节点之间通过心跳检测检查对方状态。复制集分为:Primary,Second,Arbiter节点,primary负责读写,second负责备份,(在对数据一致性要求不是很严格的情况下,有时可以让primary只负责写,副节点负责读操作,在MongoDB空闲时完成数据的更新,这样能提高一定的性能)arbiter不参与数据处理,arbiter只在primary节点故障时,起到裁决新primary节点的任务。

具体配置如下:

1:、创建3个节点的数据目录

D:\mongodb\db_rs0\data\rs0_0;

D:\mongodb\db_rs0\data\rs0_1;

D:\mongodb\db_rs0\data\rs0_2;

2、创建3个节点的日志目录

D:\mongodb\db_rs0\logs\rs0_0.log;

D:\mongodb\db_rs0\logs\rs0_1.log;

D:\mongodb\db_rs0\logs\rs0_2.log;

3、创建3个节点的启动配置文件

D:\mongodb\configs_rs0\rs0_0.conf;

D:\mongodb\configs_rs0\rs0_1.conf;

D:\mongodb\configs_rs0\rs0_2.conf;

4、3个节点的配置文件的配置

dbpath=D:\mongodb\db_rs0\data\rs0_0            这里是该节点的数据目录

logpath=D:\mongodb\db_rs0\logs\rs0_0.log   这里是该节点的日志目录

journal=true   是否需要Journal日志功能

port=40000   端口号

replSet=rs0   复制集号

5、编写MongoDB实例启动代码

rs0start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_0.conf

rs1start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_1.conf

rs2start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_1.conf

运行上面3个启动代码,就开启了MongoDB实例服务,第一次使用需要对复制集初始化,以及设置primary,second,arbiter节点。

6、运行mongo客户端:

>mongo --port 40000(服务端口号)

>rs.initiate()       (初始化rs0对象,这里其实是在磁盘上开辟空间,MongoDB会保留一部分磁盘空间,并不删除,提高数据处理响应速度)

(这里返回如果是OK,初始化就完成了)

>rs.conf()         (查看节点信息)

添加其余两个节点作为second与arbiter节点

rs0:primary>rs.add("主机号(IP):端口号")

{“ok”:1}

rs0.primary>rs.addArb("主机名(IP):端口号")

注意:

如果需要修改replica域名信息:

cfg=rs.conf()

cfg.members[复制集号].host="Ip:port"

rs.reconfig(cfg)

      1. 集群配置(分片)

Mongo分片的配置:

分片集群操作实现了数据的海量存储,查询。

分片集群分为3个部分:shard,mongos路由进程,配置服务器,其中shard就是单个mongod实例(一般是一个复制集,每个复制集的节点可以不布置到同一个主机);mongos路由进程对客户端是透明的,在用户看来,整个集群就是一个服务;配置服务器其本质也是一个mongod实例,它存储了分片信息,以提供给上层的mongos路由进程使用,这里存储了所有数据库的分片情况,正是有了这些信息,在分片集群上的查询的速度有了保证。

具体配置如下:

1、复制集的配置如1.3所示,只是需要配置多个复制集

2、配置configure服务器

(为了保证分片集群在故障后的恢复,一般将服务器也设置成复制集的形式)

configure服务配置文件:

dbpath= D:\mongodb\db_configs\data\db_config0            

logpath= D:\mongodb\db_configs\logs\db_config0.log   

journal=true   

port=40006   

configsvr=true 声明这是一个集群的configure服务

3、启动mongos路由服务器:

配置cfg_mongos.conf:

logpath=D:\mongodb\mongos\logs\mongos.log

port=40009

configdb=IP1:PORT1, IP2:PORT2, IP3:PORT3

4启动路由服务器:

>mongos --config D:\mongodb\mongos\cfg_mongos.conf

5、添加复制集至集群中:

>mongo --port 40009

mongos>sh.addShard("复制集名/复制集中不包含arbiter的所有节点")

  • 集合分片
      1. 数据库设置

分片设置完成后,需要对选定的数据库集合分片,首先需要使数据库支持分片

如下:

1、连接到集群中的mongos实例:

>mongo --port 40009

2、创建或打开数据库

mongos>use 数据库名

3、使数据库支持分片

mongos>sh.enableSharding("数据库名")

4、创建基于片键的索引使集合分片

mongos>db.users.ensureIndex({片键:1})

mongos>db.shardCollection(“库名.集合名”,{片键:1})

  • MongoDB安全设置
      1. 角色设置

1、mongod启动后,默认是没有打开权限认证的功能的,需要mongod实例修改配置文件

如下:

dbpath= D:\mongodb\db_rs0\data\rs0_0           

logpath= D:\mongodb\db_rs0\logs\rs0_0.log   

journal=true   

port=40000

auth=true

2、启动mongod命令

rs0start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_0.conf

3、创建角色:


>db.createUser(

{

user:"角色名",

pwd:"密码",

roles:[{role:"系统角色",db:"admin(admin是用于管理角色的数据库,保存权限信息)"}

]

}

4、下次登陆就需要:

>mongo --port 端口号 -u 角色名 -p密码 --authenticationDatabase admin

注意:

1、系统角色:readAnyDatabase(只读)

   readwriteAnyDatabase(读写)

   userAdminAnyDatabase(用户管理)

   dbAdminAnyDatabase(管理)

root(包括上面4个)

2、复制集,分片权限:

每个节点启动的指令

>mongo --keyFile 存储密码的txt文件路径

其余设置与单个实例设置相同

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/459235.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Pymysql之Connection中常用API

Connection中常用API 1、open() :检测数据库是否连接。 connect.open:如果数据库连接返回Trhe,否则返回False。 2、ping(reconnectTrue) connect.ping(reconnectTrue):如果reconnectTrue表示连接断开后,重新进行连接。 import…

C++重新入门-C++变量作用域

目录 1.C变量定义 2.C作用域 3.局部变量 4.全局变量 5.块作用域变量 6.初始化局部变量和全局变量 1.C变量定义 一般来说有三个地方可以定义变量: 在函数或一个代码块内部声明的变量,称为局部变量。 在函数参数的定义中声明的变量,称为…

Mysql进阶(sql优化和explain关键字)

一、为什么要对SQL进行优化? 由于业务数据量的增多,SQL的执行效率对程序的运行效率影响增大,此时就需要对SQL进行优化。 二、SQL优化的方法 1.查询sql尽量不要使用select * ,而是具体字段。 节省资源,减少开销。 …

1572.矩阵对角线元素的和(Java)

题目描述: 给你一个正方形矩阵 mat,请你返回矩阵对角线元素的和。 请你返回在矩阵主对角线上的元素和副对角线上且不在主对角线上元素的和。 输入: mat [[1,2,3], [4,5,6], [7,8,9]] 输出: 25 解释:对角线的和为&…

1978-2022年地级市全要素生产率数据

1978-2022年地级市全要素生产率数据 1、时间:1978-2022年 2、来源:城市统计年鉴以及各省市的统计年鉴 3、指标:省份、地区、年份、OLS、FE、RE、DGMM、SGMM、SFA1、SFA2、SFA3、SFA3D、TFE、非参数法 4、范围:421地区 5、参考…

前端架构: 从vue-cli探究脚手架原理

从使用角度理解什么是脚手架 脚手架本质是一个操作系统的客户端 在终端中去执行一个命令,这个命令本身它就是一个客户端我们其实可以把脚手架理解为操作系统的一个客户端通过命令去执行它的时候,这个命令往往是这样的一个构造,如下 比如&…

图像处理入门:OpenCV的基础用法解析

图像处理入门:OpenCV的基础用法解析 引言OpenCV的初步了解深入理解OpenCV:计算机视觉的开源解决方案什么是OpenCV?OpenCV的主要功能1. 图像处理2. 图像分析3. 结构分析和形状描述4. 动态分析5. 三维重建6. 机器学习7. 目标检测 OpenCV的应用场…

车载测试Vector工具CANape——常见问题汇总(下)

车载测试Vector工具CANape——常见问题汇总(下) 我是穿拖鞋的汉子,魔都中坚持长期主义的汽车电子工程师(Wechat:gongkenan2013)。 老规矩,分享一段喜欢的文字,避免自己成为高知识低文化的工程师: 屏蔽力是信息过载时代一个人的特殊竞争力,任何 消耗你的人和事,多看…

路由器如何映射端口映射?

在现代互联网中,随着网络应用的不断发展,很多用户需要进行远程访问或搭建服务器来满足自己的需求。由于网络安全的原因,直接将内网设备暴露在公网中是非常危险的。为了解决这个问题,路由器映射端口映射技术应运而生。本文将介绍什…

FPGA_ip_pll

常使用插件管理器进行ip核的配置,ip核分为计算,存储,输入输出,视频图像处理,接口,调试等。 一 pll ip核简介 pll 即锁相环,可以对输入到fpga的时钟信号,进行分频,倍频&…

Asp .Net Core 系列:Asp .Net Core 集成 NLog

简介 NLog是一个基于.NET平台编写的日志记录类库,它可以在应用程序中添加跟踪调试代码,以便在开发、测试和生产环境中对程序进行监控和故障排除。NLog具有简单、灵活和易于配置的特点,支持在任何一种.NET语言中输出带有上下文的调试诊断信息…

(力扣)1314.矩阵区域和

给你一个 m x n 的矩阵 mat 和一个整数 k &#xff0c;请你返回一个矩阵 answer &#xff0c;其中每个 answer[i][j] 是所有满足下述条件的元素 mat[r][c] 的和&#xff1a; i - k < r < i k, j - k < c < j k 且(r, c) 在矩阵内。 示例 1&#xff1a; 输入&a…