企业架构NOSQL数据库之MongoDB

目录

一、背景描述及其方案设计

(一)业务背景描述

（二）模拟运维设计方案

二、Mongodb介绍

（一）nosql介绍

（二）产品特点

1、存储性

2、 效率性

3、结构

 三、安装和配置

（一）安装方式介绍

（二）二进制可执行安装

1、上传安装包到服务器目录

2、 解压到安装目录 并移动

 3、创建数据存储目录和日志目录

4、启动mongod服务

 （三）命令行客户端操作

 四、数据结构类型操作 CURD

（一）添加数据

1、mongodb里存储数据的格式文档形式，以bson格式的文档形式。

2、 语法：db.集合名称.insert（bson格式数据）

3、普通数据添加

4、多维数据对象添加

 5、数组信息添加

 （二）查询数据

1、语法：

2、笼统方式查询

 3、条件限制查询

 4、范围条件查询

5、多个条件查询

6、多维字段查询

7、数组条件查询

（1）查询满足其中之一即可显示

 （2）满足查询条件所有的才可显示

8、限制查询字段

 9、$or查询

10、count 语法

 11、limit语法 skip语法

 （三）修改数据

 1、语法：

2、有$set的修改

3、 没有$set的修改

 （四）删除数据

1、删除记录

2、删除字段

 五、安全设置

（一）限制登录

1、使用另外一台虚拟机，使用mongo命令行端进行测试

​编辑 2、关闭mongodb

3、 添加启动的脚本，启动mongod

 4、使用远程登录mongod服务

（二） 用户权限管理

1、需求

2、语法：

3、实现步骤：

①切换admin库，进行用户创建

②关闭mongod服务，重启添加权限参数并启动

​编辑 ③测试使用

​编辑 六、业务实例

 （一）PHP扩展安装

1、上传php扩展包

2、解压编译安装

3、添加php.ini匹配

4、重启php-fpm查看phpinfo

 （二）桌面管理使用

 1、软件是绿色版本，直接解压，点击使用即可

2、填写相关参数

 ​编辑

 3、测试是否可以正常连接

4、点击连接

 5、查看数据

 （三）日志统计展示

1、很多网站需要统计某个页面或者某个功能访问量，如果访问量比较大，需要记录的组件具有很快的读写效率。可以使用功能性更多的mongodb来完成此业务。mongodb具有更多的数据灵活性。

2、网站访问日志记录的信息：

3、使用服务器

4、Tip:nginx负载均衡服务器解决后端服务获取不到真实用户IP的方式

①在负载均衡nginx服务器，填写真实用户IP的转发

②web服务器的nginx需要配置接收真实的用户IP，需要使用到模块--with-http_realip_module，在编译安装nginx时需要加入

③配置语法

​编辑 ④操作实现步骤：

 （1）删除原来的文件

（2）上传修改好的文件

（3）访问页面之后，可以查看到访问已经被记录

一、背景描述及其方案设计

(一)业务背景描述

⽤户数量： 10000-12000（⽤户量猛增）
PV ： 1000000-5000000（24小时访问次数总和）
QPS： 50-100*（每秒访问次数）  300
DAU： 2000~*000（每日活跃用户数）

根据业务需求：

用户访问日志是在web服务器access.log存储

统计每日访问量，峰值访问量

把每次访问存储到mongodb中，mongodb用来筛选日志

（二）模拟运维设计方案

根据以上业务需求，采用mongodb数据库存储用户的访问日志，使用单台服务器

①访问日志存储

②在mongo中筛选查看信息

二、Mongodb介绍

（一）nosql介绍

数据库排名：https://db-engines.com/en/ranking

关系数据库 RDBMS   设计表结构，通过SQL语句进行操作。连表关系

常见的关系型数据库：mysql oracle（商业） DB2（IBM） sqlserver（微软） access（微软） sqlite3（小型 嵌入到APP中） postgresql（加州伯克利大学）

nosql 泛指非关系数据库 存储格式key=>value   

memcached   redis 内存缓存数据库  

mongodb  具有更多的功能，可以适用于大部分的mysql场景 document store  文档型数据库

（二）产品特点

1、存储性

比较适合存储大量的没有规则、无序的数据。

存储量大：单表实现存储PB级别的数据

1KB = 1024B

1MB = 1024KB

1GB = 1024MB

1TB = 1024GB

1PB = 1024TB

1EB （Exabyte 百亿亿字节 艾字节）=1024PB，

1ZB （Zettabyte 十万亿亿字节 泽字节）= 1024EB，

1YB （Yottabyte 一亿亿亿字节 尧字节）= 1024ZB，

2、 效率性

数据的效率，就是指存储和读写速度。

 

3、结构

 三、安装和配置

（一）安装方式介绍

yum方式安装：Install MongoDB Community Edition on Red Hat or CentOS — MongoDB Manual

手动通用安装：Install MongoDB Community Edition on Linux — MongoDB Manual

（二）二进制可执行安装

1、上传安装包到服务器目录

2、 解压到安装目录 并移动

shell > tar xvf mongodb-linux-x86_64-rhel62-3.6.5.tgz
shell > mv mongodb-linux-x86_64-rhel62-3.6.5 /usr/local/mongodb

 3、创建数据存储目录和日志目录

shell > cd /usr/local/mongodb

shell > mkdir data

shell > mkdir logs

4、启动mongod服务

shell > cd /usr/local/mongodb/bin

shell > ./mongod --dbpath=/usr/local/mongodb/data --logpath=/usr/local/mongodb/logs/log.txt --fork

参数介绍：

dbpath 数据存储路径

logpath 日志存储路径

fork  后台启动

auth  权限开启

bind_ip  指定绑定网卡ip

 （三）命令行客户端操作

 四、数据结构类型操作 CURD

（一）添加数据

1、mongodb里存储数据的格式文档形式，以bson格式的文档形式。

在mongodb中，可有无需创建数据库和集合，使用的时候会自动创建 

创建一个库devops

2、 语法：db.集合名称.insert（bson格式数据）

3、普通数据添加

db.goods.insert({name:'huawei01',price:1000,weight:135,number:35})

4、多维数据对象添加

db.goods.insert({name:'xiaomi5',price:1999,weight:156,number:45,area:{province:'beijing',city:'beijing'}})

 5、数组信息添加

db.goods.insert({name:'xiaomimax',price:2000,weight:180,number:100,area:{province:'henan',city:'zhengzhou'},color:['black','white','red']})

 （二）查询数据

1、语法：

db.集合名称.find(查询条件)

db.集合名称.findOne(查询条件)

2、笼统方式查询

不进行条件限制，全部取出来。

findOne会取出符合结果的第一条信息，并且以格式化形式返回

 3、条件限制查询

条件格式，所见及所得
db.goods.find({name:'xiaomimax'})
db.goods.findOne({name:'xiaomimax'})

 4、范围条件查询

mysql   <     <=   >   >=    !=

mongo  $lt    $lte  $gt  $gte  $ne

db.goods.find({price:{'$lte':1999}})

db.goods.find({price:{'$lt':1999}})

5、多个条件查询

类似mysql中的AND语法

db.goods.find({price:{'$lte':1999},number:{'$gte':40}})

6、多维字段查询

通过多维字段的值进行查询

db.goods.find({'area.city':'zhengzhou'});

注意：多维字段需要用引号包含起来

7、数组条件查询

（1）查询满足其中之一即可显示

db.goods.find({color:'black'})

 （2）满足查询条件所有的才可显示

db.集合名称.find({字段(数组):{‘$all’:[v1,v2]}})

db.goods.insert({name:'iphonex',price:8398,weight:100,number:200,area:{province:'jiangsu',city:'nanjing'},color:['gray','black','white','gold']})

db.goods.find({color:{'$all':['black','gold']}})

8、限制查询字段

在实际使用环境，不需要查询并显示太多的字段。可以选择设定显示。

语法：db.集合名称.find({查询条件},{筛选条件})

显示为1,不显示为0   要是1都是1，要是0都是0  _id除外

db.goods.find({color:{'$all':['black','gold']}},{name:1,_id:0})

 注意采用合适的方式，显示出查询字段值内容

_id是mongodb数据库里的集合中，默认的主键id，具有索引内容，通过主键查询，会很快的查询速度。不要随意修改此值，使用默认即可。

 9、$or查询

满足其中之一的条件就可以显示，类似mysql的中的or条件语法
select * from goods where price > 5000 or number >= 100

db.goods.find({'$or':[{price:{'$gt':5000}},{number:{'$gte':100}}]})

10、count 语法

返回结果的数量统计

链式操作

db.goods.count()
db.goods.find({price:{'$gt':5000}}).count()
db.goods.count({price:{'$gt':5000}})

 

 11、limit语法 skip语法

类似于mysql中的limit（skip,length）语法
limit()  取几个
skip()   跳过几个
db.goods.find().limit(1);

db.goods.find().skip(1).limit(1);

mongodb语法和SQL语句的对比

 

 （三）修改数据

 1、语法：

db.集合名称.update({查询条件},{修改条件})
db.集合名称.updateOne()  修改匹配的第一条
db.集合名称.updateMany()  修改匹配所有条

2、有$set的修改

db.goods.update({name:'iphonex'},{'$set':{price:8500}})
   

db.没有$set的修改goods.updateOne({name:'xiaomi5'},{'$set':{price:1500}})

3、 没有$set的修改

没有$set关键字语法，把设置的字段进行修改,没有设置的就会被删除掉

db.goods.update({name:'iphonex'},{price:8550})

 （四）删除数据

1、删除记录

db.集合名称.remove({查询条件})

db.集合名称.deleteOne()  删除匹配的第一条

db.集合名称.deleteMany()  删除匹配的多条

db.goods.remove({price:8550})

db.goods.deleteMany({price:{'$lte':2000}})

 

2、删除字段

可以删除某个字段的操作，使用的是update语法的$unset

db.goods.update({name:'huawei01'},{'$unset':{weight:0}})

值给一个就可以删除了

真实业务当中，一般不做物理删除，会使用一个标识，来确认是否已经被删除的数据

 五、安全设置

https://docs.mongodb.com/manual/tutorial/create-users/       

mongodb安全事件：https://www.jianshu.com/p/48d17a69e190

（一）限制登录

1、使用另外一台虚拟机，使用mongo命令行端进行测试

远程登录方法

2、关闭mongodb

正常情况下不要kill -9 mongod，使用mongo命令客户端里的关机命令

3、 添加启动的脚本，启动mongod

shell > vim /etc/init.d/mongodb

 

bind绑定是外网通讯的网卡   --bind_ip_all表示绑定0.0.0.0这个任意地址

 4、使用远程登录mongod服务

（二） 用户权限管理

1、需求

设置一个超级管理员账户，对于所有库具有读写权限

2、语法：

db.createUser({user:"root",pwd:"root",roles:["root"]})

3、实现步骤：

①切换admin库，进行用户创建

②关闭mongod服务，重启添加权限参数并启动

关闭

在启动脚本中加入--auth参数

 ③测试使用

 添加用户，限制用的库的权限，只读

 六、业务实例

 （一）PHP扩展安装

1、上传php扩展包

如果没有phpize这个命令，需要yum安装php-devel

2、解压编译安装

shell > yum -y install php-devel  #安装phpize
shell > tar xvf mongodb-1.5.3.tgz
shell > cd mongodb-1.5.3
shell > phpize
shell > ./configure && make && make install

3、添加php.ini匹配

shell > vim /usr/local/php/etc/php.ini

4、重启php-fpm查看phpinfo

shell > service php-fpm restart

 （二）桌面管理使用

 1、软件是绿色版本，直接解压，点击使用即可

 

2、填写相关参数

 

 

 3、测试是否可以正常连接

 

4、点击连接

 5、查看数据

 （三）日志统计展示

1、很多网站需要统计某个页面或者某个功能访问量，如果访问量比较大，需要记录的组件具有很快的读写效率。可以使用功能性更多的mongodb来完成此业务。mongodb具有更多的数据灵活性。

2、网站访问日志记录的信息：

ip 用户访问的来源ip
url  用户访问的地址  功能模块页面地址
time  访问时间  记录用户访问的时间值
user_agent 用户访问的客户端信息

3、使用服务器

web1（server01）->mycat（server07）->master（server02）->slave（server06）->cache（server08）->mongodb（server10）

4、Tip:nginx负载均衡服务器解决后端服务获取不到真实用户IP的方式

①在负载均衡nginx服务器，填写真实用户IP的转发

注意如果使用负载均衡，后端获取的IP为负载均衡代理的IP。

如果后端需要获取到真是的IP，负载均衡服务器，必须要配置参数，把真实IP进行传输 

②web服务器的nginx需要配置接收真实的用户IP，需要使用到模块--with-http_realip_module，在编译安装nginx时需要加入

③配置语法

④操作实现步骤：

 （1）删除原来的文件

（2）上传修改好的文件

（3）访问页面之后，可以查看到访问已经被记录

php中获取代理的真实IP的方式，但是一定要注意必须是代理服务器有传真实IP

 

 

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/62266.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

Statefulset 实战 3

Statefulset 实战 3

上一部分我们说到如何使用 Statefulset 部署有状态的应用&#xff0c;Statefulset 可以做到部署的 每一个 pod 能够独立的拥有一个持久卷声明和持久卷 之前我们 用 Statefulset 和 ReplicaSet 对比&#xff0c;自然他们是有相似之处和不同之处&#xff0c;不同之处前面的文章已…
阅读更多...
【嵌入式环境下linux内核及驱动学习笔记-（18）LCD驱动框架1-LCD控制原理】

【嵌入式环境下linux内核及驱动学习笔记-（18）LCD驱动框架1-LCD控制原理】

目录 1、LCD显示系统介绍1.1 LCD显示基本原理1.1.1 颜色的显示原理&#xff1a;1.1.2 图像的构成 1.2 LCD接口介绍1.2.1 驱动接口 - MCU接口1.2.2 驱动接口 - RGB接口1.2.3 驱动接口 - LVDS接口1.2.4 驱动接口 - MIPI接口1.2.5 RGB / MIPI / LVDS三种接口方式的区别&#xff1a…
阅读更多...
【雕爷学编程】MicroPython动手做（30）——物联网之Blynk

【雕爷学编程】MicroPython动手做（30）——物联网之Blynk

知识点&#xff1a;什么是掌控板&#xff1f; 掌控板是一块普及STEAM创客教育、人工智能教育、机器人编程教育的开源智能硬件。它集成ESP-32高性能双核芯片&#xff0c;支持WiFi和蓝牙双模通信&#xff0c;可作为物联网节点&#xff0c;实现物联网应用。同时掌控板上集成了OLED…
阅读更多...
《MySQL高级篇》十五、其他数据库日志

《MySQL高级篇》十五、其他数据库日志

文章目录 1. MySQL支持的日志1.1 日志类型1.2 日志的弊端 2. 慢查询日志(slow query log)3. 通用查询日志3.1 问题场景3.2 查看当前状态3.3 启动日志3.4 查看日志3.5 停止日志3.6 删除\刷新日志 4. 错误日志(error log)4.1 启动日志4.2 查看日志4.3 删除\刷新日志4.4 MySQL8.0新…
阅读更多...
el-table 去掉边框（修改颜色）

el-table 去掉边框（修改颜色）

原始&#xff1a; 去掉表格的border属性&#xff0c;每一行下面还会有一条线&#xff0c;并且不能再拖拽表头 为了满足在隐藏表格边框的情况下还能拖动表头&#xff0c;修改相关css即可&#xff0c;如下代码 <style lang"less"> .table {//避免单元格之间出现白…
阅读更多...
计算机网络（3） --- 网络套接字TCP

计算机网络（3） --- 网络套接字TCP

计算机网络&#xff08;2&#xff09; --- 网络套接字UDP_哈里沃克的博客-CSDN博客https://blog.csdn.net/m0_63488627/article/details/131977544?spm1001.2014.3001.5501 目录 1.TCP 1.服务端接口介绍 1.listen状态 2.accept获取链接 2.客户端接口介绍 2.TCP的服务器…
阅读更多...
【TypeScript】TS接口interface类型（三）

【TypeScript】TS接口interface类型（三）

【TypeScript】TS接口interface类型&#xff08;三&#xff09; 【TypeScript】TS接口interface类型&#xff08;三&#xff09;一、接口类型二、实践使用2.1 常规类型2.2 设置属性只读 readonly2.3 设置索引签名2.4 设置可选属性2.5 函数类型接口 一、接口类型 TypeScript中的…
阅读更多...
QtWebApp同时开启http服务和https服务，接受来自客户端的不同请求并进行相应的处理

QtWebApp同时开启http服务和https服务，接受来自客户端的不同请求并进行相应的处理

零、前言 在 QtWebApp开发https服务器&#xff0c;完成客户端与服务器基于ssl的双向认证&#xff0c;纯代码操作 一文中已经用纯代码的形式完成了客户端和服务端的 https 协议交互。 不过&#xff0c;只是开放了https服务&#xff0c;更多情况下&#xff0c;http服务和https服…
阅读更多...
奥威BI—数字化转型首选，以数据驱动企业发展

奥威BI—数字化转型首选，以数据驱动企业发展

奥威BI系统BI方案可以迅速构建企业级大数据分析平台&#xff0c;可以将大量数据转化为直观、易于理解的图表和图形&#xff0c;推动和促进数字化转型的进程&#xff0c;帮助企业更好地了解自身的运营状况&#xff0c;及时发现问题并采取相应的措施&#xff0c;提高运营效率和质…
阅读更多...
多线程（JavaEE初阶系列7）

多线程（JavaEE初阶系列7）

目录 前言&#xff1a; 1.常见的锁策略 1.1乐观锁和悲观锁 1.2轻量级锁和重量级锁 1.3自旋锁和挂起等待锁 1.4互斥锁与读写锁 1.5可重入锁与不可重入锁 1.6公平锁与非公平锁 2.CAS 2.1什么是CAS 2.2自旋锁的实现 2.3原子类 3.synchronized 3.1synchronized的原理以…
阅读更多...
矢量网络分析仪-1

矢量网络分析仪-1

阅读更多...
解决Element Plus中Select在El Dialog里层级过低的问题（修改select选项框样式）

解决Element Plus中Select在El Dialog里层级过低的问题（修改select选项框样式）

Element Plus是Vue.js的一套基于Element UI的组件库&#xff0c;提供了丰富的组件用于构建现代化的Web应用程序。其中&#xff0c;<el-select>是一个常用的下拉选择器组件&#xff0c;但在某些情况下&#xff0c;当<el-select>组件嵌套在<el-dialog>&#xf…
阅读更多...
DP-GAN剩余代码

DP-GAN剩余代码

在前面计算完损失后&#xff0c;该进行更新&#xff1a; 1&#xff1a;netEMA是模型的生成器&#xff1a; 遍历生成器的state_dict&#xff0c;将每一个键对应的值乘以EMA_decay。 接着根据当前迭代步数计算num_upd&#xff0c;每1000,2500,10000代倍数就执行一次。 当num…
阅读更多...
Spring(11) Bean的生命周期

Spring(11) Bean的生命周期

目录 一、简介二、Bean的流程1.BeanDefinition2.Bean 的生命周期 三、代码验证1.User 实体类2.MyBeanPostProcessor 后置处理器3.SpringConfig 扫描包配置4.UserTest 测试类5.测试结果6.模拟AOP增强 一、简介 首先&#xff0c;为什么要学习 Spring 中 Bean 的生命周期呢&#…
阅读更多...
【网络工程】网络流量分析工具 Wireshark

【网络工程】网络流量分析工具 Wireshark

文章目录 第一章&#xff1a;WireShark介绍第二章&#xff1a;WireShark应用第三章&#xff1a;Wireshark 实战 第一章&#xff1a;WireShark介绍 Wireshark (前身 Ethereal)&#xff1a;它是一个强大的网络封包分析软件工具 ! 此工具使用WinPCAP作为接口&#xff0c;直接与网卡…
阅读更多...
TiDB Serverless 正式商用，全托管的云服务带来数据管理和应用程序开发的全新体验

TiDB Serverless 正式商用，全托管的云服务带来数据管理和应用程序开发的全新体验

八 年 前 &#xff0c;我们构建了 TiDB&#xff0c;一个开源分布式关系型数据库。 我们的目标是重新定义开发者和企业处理数据的方式&#xff0c;满足不断增长的可扩展性、灵活性和性能需求。 从那时起&#xff0c;PingCAP 便致力于为开发者和企业提供快速、灵活和规模化的数据…
阅读更多...
线性代数 | 机器学习数学基础

线性代数 | 机器学习数学基础

前言 线性代数&#xff08;linear algebra&#xff09;是关于向量空间和线性映射的一个数学分支。它包括对线、面和子空间的研究&#xff0c;同时也涉及到所有的向量空间的一般性质。 本文主要介绍机器学习中所用到的线性代数核心基础概念&#xff0c;供读者学习阶段查漏补缺…
阅读更多...
Autosar通信入门系列05-聊聊一帧Can/CanFD报文发送时间？

Autosar通信入门系列05-聊聊一帧Can/CanFD报文发送时间？

本文框架 1. 概述2. 一帧CAN报文发送时间计算3. 一帧CanFD报文的传输时间计算3.1 标准CAN与CANFD两者间的区别3.2 CANFD报文传输时间计算 1. 概述 本篇我们一起看下一帧Can报文发送需要多长时间&#xff0c;下述文章里我们会首先计算下Can分别对应的字节数&#xff0c;再根据传…
阅读更多...
Linux 下设置开机自启动的方法

Linux 下设置开机自启动的方法

文章目录 事先准备对于普通的 Linux对于 RedHat Enterprise Linux 9 笔者的运行环境&#xff1a; 设置成功过的 Linux&#xff1a; RedHat Enterprise Linux 9 x86_64 CentOS 8 x86_64 事先准备 进行这个教程之前&#xff0c;必须要先安装好一个 Linux 操作系统。这个 Linux…
阅读更多...
C 语言高级3--函数指针回调函数，预处理，动态库的封装

C 语言高级3--函数指针回调函数，预处理，动态库的封装

目录 1.函数指针和回调函数 1.1 函数指针 1.1.1 函数类型 1.1.2 函数指针(指向函数的指针) 1.1.3 函数指针数组 1.1.4 函数指针做函数参数(回调函数) 2.预处理 2.1 预处理的基本概念 2.2 文件包含指令(#include) 2.2.1 文件包含处理 2.2.2 #incude<>和#include&q…
阅读更多...
最新文章

Copyright @ 2022~2023