MongoDB部署策略

本文介绍了MongoDB数据库的优点的数据存储模式的安装部署过程。

利用MongoDB在存储海量数据上的优势,部署存储空间大数据。

·欢迎批评指正补充

由于编者水平有限,所搜集资料也很有限,制定的规范肯定有考虑不周全、甚至完全错误的地方,欢迎大家批评指正。这些内容肯定很不全面,有什么好的原则、经验,也欢迎补充。

  • 安装MongoDB

MongoDB官方已经发布了Win,Linux,MAC ,Solaris 4种平台的发布包,最新的版本是3.2.3,MongoDB遵循了偶数版本较为稳定的发布策略,这里推荐下载(2.4.x,2.6.x,3.0.x)版本。(安装版本推荐使用64位版本,因为MongoDB自身并不管理内存,这些工作都是交由操作系统完成,所以寻址空间只支持2.8G,同时MongoDB的性能与内存大小有直接关联)下载地址是http://www.mongodb.org/downloads

      1. 解压

下载完成后,解压,就可以直接运行bin目录下的二进制文件,一般意义上的安装MongoDB,就是安装MongoDB的服务端进程mongod,如图1-1所示。

图1-1 解压后的文件

      1. 配置目录环境(win平台为例)

bin目录下的mongod.exe在运行时需要配置数据文件目录,如:D:\mongodb\db_rs0\data\rs0_0;同时指定一个日志接收文件,如: D:\mongodb\db_rs0\logs\1.log;配置服务配置文件的路径,如:D:\mongodb\db_rs0\logs,也可以直接运行下列命令>mongod -- dbpath D:/mongodb\db_rs0\data\rs0_0 ,Linux下的安装可以利用对应的包管理器,系统自动创建目录和日志文件。

      1. 集群配置(复制集)

Mongo复制集的配置:

复制集操作实现了数据库的冗余,用于数据从故障中的恢复,同时以复制集的冗余也保证了分片功能的稳定。

一般来说,一个复制集至少需要3个节点,每个节点都是mongod的一个实例,节点之间通过心跳检测检查对方状态。复制集分为:Primary,Second,Arbiter节点,primary负责读写,second负责备份,(在对数据一致性要求不是很严格的情况下,有时可以让primary只负责写,副节点负责读操作,在MongoDB空闲时完成数据的更新,这样能提高一定的性能)arbiter不参与数据处理,arbiter只在primary节点故障时,起到裁决新primary节点的任务。

具体配置如下:

1:、创建3个节点的数据目录

D:\mongodb\db_rs0\data\rs0_0;

D:\mongodb\db_rs0\data\rs0_1;

D:\mongodb\db_rs0\data\rs0_2;

2、创建3个节点的日志目录

D:\mongodb\db_rs0\logs\rs0_0.log;

D:\mongodb\db_rs0\logs\rs0_1.log;

D:\mongodb\db_rs0\logs\rs0_2.log;

3、创建3个节点的启动配置文件

D:\mongodb\configs_rs0\rs0_0.conf;

D:\mongodb\configs_rs0\rs0_1.conf;

D:\mongodb\configs_rs0\rs0_2.conf;

4、3个节点的配置文件的配置

dbpath=D:\mongodb\db_rs0\data\rs0_0            这里是该节点的数据目录

logpath=D:\mongodb\db_rs0\logs\rs0_0.log   这里是该节点的日志目录

journal=true   是否需要Journal日志功能

port=40000   端口号

replSet=rs0   复制集号

5、编写MongoDB实例启动代码

rs0start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_0.conf

rs1start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_1.conf

rs2start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_1.conf

运行上面3个启动代码,就开启了MongoDB实例服务,第一次使用需要对复制集初始化,以及设置primary,second,arbiter节点。

6、运行mongo客户端:

>mongo --port 40000(服务端口号)

>rs.initiate()       (初始化rs0对象,这里其实是在磁盘上开辟空间,MongoDB会保留一部分磁盘空间,并不删除,提高数据处理响应速度)

(这里返回如果是OK,初始化就完成了)

>rs.conf()         (查看节点信息)

添加其余两个节点作为second与arbiter节点

rs0:primary>rs.add("主机号(IP):端口号")

{“ok”:1}

rs0.primary>rs.addArb("主机名(IP):端口号")

注意:

如果需要修改replica域名信息:

cfg=rs.conf()

cfg.members[复制集号].host="Ip:port"

rs.reconfig(cfg)

      1. 集群配置(分片)

Mongo分片的配置:

分片集群操作实现了数据的海量存储,查询。

分片集群分为3个部分:shard,mongos路由进程,配置服务器,其中shard就是单个mongod实例(一般是一个复制集,每个复制集的节点可以不布置到同一个主机);mongos路由进程对客户端是透明的,在用户看来,整个集群就是一个服务;配置服务器其本质也是一个mongod实例,它存储了分片信息,以提供给上层的mongos路由进程使用,这里存储了所有数据库的分片情况,正是有了这些信息,在分片集群上的查询的速度有了保证。

具体配置如下:

1、复制集的配置如1.3所示,只是需要配置多个复制集

2、配置configure服务器

(为了保证分片集群在故障后的恢复,一般将服务器也设置成复制集的形式)

configure服务配置文件:

dbpath= D:\mongodb\db_configs\data\db_config0            

logpath= D:\mongodb\db_configs\logs\db_config0.log   

journal=true   

port=40006   

configsvr=true 声明这是一个集群的configure服务

3、启动mongos路由服务器:

配置cfg_mongos.conf:

logpath=D:\mongodb\mongos\logs\mongos.log

port=40009

configdb=IP1:PORT1, IP2:PORT2, IP3:PORT3

4启动路由服务器:

>mongos --config D:\mongodb\mongos\cfg_mongos.conf

5、添加复制集至集群中:

>mongo --port 40009

mongos>sh.addShard("复制集名/复制集中不包含arbiter的所有节点")

  • 集合分片
      1. 数据库设置

分片设置完成后,需要对选定的数据库集合分片,首先需要使数据库支持分片

如下:

1、连接到集群中的mongos实例:

>mongo --port 40009

2、创建或打开数据库

mongos>use 数据库名

3、使数据库支持分片

mongos>sh.enableSharding("数据库名")

4、创建基于片键的索引使集合分片

mongos>db.users.ensureIndex({片键:1})

mongos>db.shardCollection(“库名.集合名”,{片键:1})

  • MongoDB安全设置
      1. 角色设置

1、mongod启动后,默认是没有打开权限认证的功能的,需要mongod实例修改配置文件

如下:

dbpath= D:\mongodb\db_rs0\data\rs0_0           

logpath= D:\mongodb\db_rs0\logs\rs0_0.log   

journal=true   

port=40000

auth=true

2、启动mongod命令

rs0start.bat:

@D:\mongodb\bin\mongod -config D:\mongodb\configs_rs0\rs0_0.conf

3、创建角色:


>db.createUser(

{

user:"角色名",

pwd:"密码",

roles:[{role:"系统角色",db:"admin(admin是用于管理角色的数据库,保存权限信息)"}

]

}

4、下次登陆就需要:

>mongo --port 端口号 -u 角色名 -p密码 --authenticationDatabase admin

注意:

1、系统角色:readAnyDatabase(只读)

   readwriteAnyDatabase(读写)

   userAdminAnyDatabase(用户管理)

   dbAdminAnyDatabase(管理)

root(包括上面4个)

2、复制集,分片权限:

每个节点启动的指令

>mongo --keyFile 存储密码的txt文件路径

其余设置与单个实例设置相同

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/377478.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

JavaEE作业-实验三

目录 1 实验内容 2 实验要求 3 思路 4 核心代码 5 实验结果 1 实验内容 简单的线上图书交易系统的web层 2 实验要求 ①采用SpringMVC框架,采用REST风格 ②要求具有如下功能:商品分类、订单、购物车、库存 ③独立完成,编写实验报告 …

Linux---线程

线程概念 在一个程序里的一个执行路线就叫做线程(thread)。更准确的定义是:线程是“一个进程内部的控制序列” 一切进程至少都有一个执行线程 线程在进程内部运行,本质是在进程地址空间内运行 在Linux系统中,在CPU眼中…

java学习06---方法

一 方法 方法(method)是程序中最小的执行单元 注意: 方法必须先创建才可以使用,该过程成为方法定义 方法创建后并不是直接可以运行的,需要手动使用后,才执行,该过程成为方法调用 二 方法的…

(注解配置AOP)学习Spring的第十七天

基于注解配置的AOP 来看注解式开发 : 先把目标与通知放到Spring里管理 : Service("userService") public class UserServiceImpl implements UserService {Overridepublic void show1() {System.out.println("show1......");}Overridepublic void show2…

SpringBoot + Tess4J 实现本地与远程图片的文字识别

1 前言 1.1 概要 在本文中,我们将探讨如何在Spring Boot应用程序里集成Tess4J来实现OCR(光学字符识别),以识别出本地和远程图片中的文字。 我们将从添加依赖说起,然后创建服务类以实现OCR,最后展示如何处…

Java项目使用jasypt加密和解密配置文件中关键信息

一、使用背景 项目中application.yml 配置文件中,如数据库、redis、加密算法的私钥等各种配置的username,password的值都是明文的,其实存在一定的安全隐患,如果被人拿到这些配置文件,将直接对系统安全构成极大威胁&…

多维时序 | Matlab实现RF-Adaboost随机森林结合Adaboost多变量时间序列预测

多维时序 | Matlab实现RF-Adaboost随机森林结合Adaboost多变量时间序列预测 目录 多维时序 | Matlab实现RF-Adaboost随机森林结合Adaboost多变量时间序列预测预测效果基本介绍程序设计参考资料 预测效果 基本介绍 1.Matlab实现RF-Adaboost随机森林结合Adaboost多变量时间序列预…

【PyQt】06-.ui文件转.py文件

文章目录 前言方法一、基本脚本查看自己的uic安装目录 方法二、添加到扩展工具里面(失败了)方法二的成功步骤总结 前言 方法一、基本脚本 将Qt Designer(一种图形用户界面设计工具)生成的.ui文件转换为Python代码的脚本。 pytho…

TI毫米波雷达开发——High Accuracy Demo 串口数据接收及TLV协议解析 matlab 源码

TI毫米波雷达开发——串口数据接收及TLV协议解析 matlab 源码 前置基础源代码功能说明功能演示视频文件结构01.bin / 02.binParseData.mread_file_and_plot_object_location.mread_serial_port_and_plot_object_location.m函数解析configureSport(comportSnum)readUartCallback…

不到1s生成mesh! 高效文生3D框架AToM

论文题目: AToM: Amortized Text-to-Mesh using 2D Diffusion 论文链接: https://arxiv.org/abs/2402.00867 项目主页: AToM: Amortized Text-to-Mesh using 2D Diffusion 随着AIGC的爆火,生成式人工智能在3D领域也实现了非常显著…

计算机网络概念、组成、功能和分类

文章目录 概要1.怎么学习计算机网络2.概念3.功能、组成4.工作方式、功能组成5.分类 概要 概念、组成、功能和分类 1.怎么学习计算机网络 2.概念 通信设备:比如路由器、路由器 线路:将系统和通信设备两者联系的介质之类的 计算机网络是互连的、自治的的计…

CTFshow web(php命令执行 37-40)

?ceval($_GET[shy]);&shypassthru(cat flag.php); #逃逸过滤 ?cinclude%09$_GET[shy]?>&shyphp://filter/readconvert.base64-encode/resourceflag.php #文件包含 ?cinclude%0a$_GET[cmd]?>&cmdphp://filter/readconvert.base64-encode/…

spring boot和spring cloud项目中配置文件application和bootstrap加载顺序

在前面的文章基础上 https://blog.csdn.net/zlpzlpzyd/article/details/136060312 日志配置 logback-spring.xml <?xml version"1.0" encoding"UTF-8"?> <configuration scan"true" scanPeriod"10000000 seconds" debug…

Leetcode 213 打家劫舍 II

题意理解&#xff1a; 你是一个专业的小偷&#xff0c;计划偷窃沿街的房屋&#xff0c;每间房内都藏有一定的现金。这个地方所有的房屋都 围成一圈 &#xff0c;这意味着第一个房屋和最后一个房屋是紧挨着的。同时&#xff0c;相邻的房屋装有相互连通的防盗系统&#xff0c;如果…

mysql 对于null字段排序处理

最近遇到一个需求 &#xff0c;需要对一个报表的多个字段进行多字段复杂条件排序 排序字段为NULL时 Mysql对于排序字段为NULL时&#xff0c;有自身默认的排序规则&#xff0c;默认是认为null 值 是无穷小 ELECT id,script_id,last_modified,live_count,next_show FROM virtua…

python-自动化篇-办公-一键将word中的表格提取到excel文件中

文章目录 代码 工作中&#xff0c;经常需要将Word文档中的表格粘贴到Excel文件中&#xff0c;以便汇总及分析。一个一个复制粘贴&#xff0c;非常不方便&#xff0c;还是Python自动化操作&#xff0c;省心省力。要求如下图所示&#xff0c;即将word中的所有表格&#xff0c;转存…

红队打靶练习:PHOTOGRAPHER: 1

目录 信息收集 1、arp 2、nmap 3、nikto 目录扫描 1、gobuster 2、dirsearch WEB 信息收集 enum4linux smbclient 8000端口 CMS利用 信息收集 文件上传漏洞利用 提权 信息收集 get user.txt get flag 信息收集 1、arp ┌──(root㉿ru)-[~/kali] └─# a…

【开源】JAVA+Vue.js实现开放实验室管理系统

目录 一、摘要1.1 项目介绍1.2 项目录屏 二、研究内容2.1 实验室类型模块2.2 实验室模块2.3 实验管理模块2.4 实验设备模块2.5 实验订单模块 三、系统设计3.1 用例设计3.2 数据库设计 四、系统展示五、样例代码5.1 查询实验室设备5.2 实验放号5.3 实验预定 六、免责说明 一、摘…

【快速上手QT】02-学会查看QT自带的手册QT助手

QT助手 为什么大家都说QT简单&#xff0c;第一点就是确实简单&#xff08;bushi&#xff09;。 我个人觉得最关键的点就是人家QT官方就给你准备好了文档&#xff0c;甚至还有专门的IDE——QtCreator&#xff0c;在QTCreator里面还有很多示例代码&#xff0c;只要你会C的语法以…

小白水平理解面试经典题目LeetCode 71. Simplify Path【Stack类】

71. 简化路径 小白渣翻译 给定一个字符串 path &#xff0c;它是 Unix 风格文件系统中文件或目录的绝对路径&#xff08;以斜杠 ‘/’ 开头&#xff09;&#xff0c;将其转换为简化的规范路径。 在 Unix 风格的文件系统中&#xff0c;句点 ‘.’ 指的是当前目录&#xff0c;…