NoSQL概述与Redis入门-redis安装与测试

一、Nosql概述

1、为什么使用Nosql

1、单机Mysql时代

在这里插入图片描述

90年代,一个网站的访问量一般不会太大，单个数据库完全够用。随着用户增多，网站出现以下问题

  1. 数据量增加到一定程度，单机数据库就放不下了
  2. 数据的索引（B+ Tree）,一个机器内存也存放不下
  3. 访问量变大后（读写混合），一台服务器承受不住。

2、Memcached(缓存) + Mysql + 垂直拆分（读写分离）

网站80%的情况都是在读，每次都要去查询数据库的话就十分的麻烦！所以说我们希望减轻数据库的压力，我们可以使用缓存来保证效率！

在这里插入图片描述

优化过程经历了以下几个过程：

①优化数据库的数据结构和索引(难度大)

②文件缓存，通过IO流获取比每次都访问数据库效率略高，但是流量爆炸式增长时候，IO流也承受不了

③MemCache,当时最热门的技术，通过在数据库和数据库访问层之间加上一层缓存，第一次访问时查询数据库，将结果保存到缓存，后续的查询先检查缓存，若有直接拿去使用，效率显著提升。

3、分库分表 + 水平拆分 + Mysql集群

在这里插入图片描述

4、如今最近的年代

如今信息量井喷式增长，各种各样的数据出现（用户定位数据，图片数据等），大数据的背景下关系型数据库（RDBMS）无法满足大量数据要求。Nosql数据库就能轻松解决这些问题。

目前一个基本的互联网项目

在这里插入图片描述

为什么要用NoSQL ？

用户的个人信息，社交网络，地理位置。用户自己产生的数据，用户日志等等爆发式增长！
这时候我们就需要使用NoSQL数据库的，Nosql可以很好的处理以上的情况！

2、什么是Nosql

NoSQL = Not Only SQL（不仅仅是SQL）

Not Only Structured Query Language

关系型数据库：列+行，同一个表下数据的结构是一样的。

非关系型数据库：数据存储没有固定的格式，并且可以进行横向扩展。

NoSQL泛指非关系型数据库，随着web2.0互联网的诞生，传统的关系型数据库很难对付web2.0时代！尤其是超大规模的高并发的社区，暴露出来很多难以克服的问题，NoSQL在当今大数据环境下发展的十分迅速，Redis是发展最快的。

3、Nosql特点

  1. 方便扩展（数据之间没有关系，很好扩展！）
  2. 大数据量高性能（Redis一秒可以写8万次，读11万次，NoSQL的缓存记录级，是一种细粒度的缓存，性能会比较高！）
  3. 数据类型是多样型的！（不需要事先设计数据库，随取随用）
  4. 传统的 RDBMS 和 NoSQL
传统的 RDBMS(关系型数据库)
- 结构化组织
- SQL
- 数据和关系都存在单独的表中 row col
- 操作，数据定义语言
- 严格的一致性
- 基础的事务
- ...

Nosql
- 不仅仅是数据
- 没有固定的查询语言
- 键值对存储，列存储，文档存储，图形数据库（社交关系）
- 最终一致性
- CAP定理和BASE
- 高性能，高可用，高扩展
- ...

了解：3V + 3高

大数据时代的3V ：主要是描述问题的

  1. 海量Velume
  2. 多样Variety
  3. 实时Velocity

大数据时代的3高 ： 主要是对程序的要求

  1. 高并发
  2. 高可扩
  3. 高性能

真正在公司中的实践：NoSQL + RDBMS 一起使用才是最强的。

4、阿里巴巴演进分析

推荐阅读：阿里云的这群疯子https://yq.aliyun.com/articles/653511

在这里插入图片描述

在这里插入图片描述

# 商品信息
- 一般存放在关系型数据库：Mysql,阿里巴巴使用的Mysql都是经过内部改动的。

# 商品描述、评论(文字居多)
- 文档型数据库：MongoDB

# 图片
- 分布式文件系统 FastDFS
- 淘宝：TFS
- Google: GFS
- Hadoop: HDFS
- 阿里云: oss

# 商品关键字 用于搜索
- 搜索引擎：solr,elasticsearch
- 阿里：Isearch 多隆

# 商品热门的波段信息
- 内存数据库：Redis，Memcache

# 商品交易，外部支付接口
- 第三方应用

5、Nosql的四大分类

KV键值对

  • 新浪：Redis
  • 美团：Redis + Tair
  • 阿里、百度：Redis + Memcache

文档型数据库（bson数据格式）：

  • MongoDB(掌握)
    • 基于分布式文件存储的数据库。C++编写，用于处理大量文档。
    • MongoDB是RDBMS和NoSQL的中间产品。MongoDB是非关系型数据库中功能最丰富的，NoSQL中最像关系型数据库的数据库。
  • ConthDB

列存储数据库

  • HBase(大数据必学)
  • 分布式文件系统

图关系数据库

用于广告推荐，社交网络

  • Neo4j、InfoGrid

在这里插入图片描述

二、Redis入门

1、概述

Redis是什么？

Redis（Remote Dictionary Server )，即远程字典服务。

是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。

与memcached一样，为了保证效率，数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件，并且在此基础上实现了master-slave(主从)同步。

Redis能该干什么？

  1. 内存存储、持久化，内存是断电即失的，所以需要持久化（RDB、AOF）
  2. 高效率、用于高速缓冲
  3. 发布订阅系统
  4. 地图信息分析
  5. 计时器、计数器(eg：浏览量)
  6. 。。。

2、环境搭建

官网：https://redis.io/

推荐使用Linux服务器学习。

windows版本的Redis已经停更很久了…

3、Windows安装

https://github.com/dmajkic/redis

1.解压安装包

在这里插入图片描述

2.开启redis-server.exe

3.启动redis-cli.exe测试

在这里插入图片描述

4、Linux安装（重点）

1.下载安装包！redis-5.0.8.tar.gz

2.解压Redis的安装包！程序一般放在 /opt 目录下

在这里插入图片描述

3.基本环境安装

yum install gcc-c++
# 然后进入redis目录下执行
make
# 然后执行
make install

在这里插入图片描述

4.redis默认安装路径 /usr/local/bin

在这里插入图片描述

5.将redis的配置文件复制到 程序安装目录 /usr/local/bin/kconfig下

在这里插入图片描述

6.redis默认不是后台启动的，需要修改配置文件！

在这里插入图片描述

7.通过制定的配置文件启动redis服务

在这里插入图片描述

redis-server kconfig/redis.conf

8.使用redis-cli连接指定的端口号测试，Redis的默认端口6379

在这里插入图片描述

redis-cli -p 6379

9.查看redis进程是否开启

在这里插入图片描述

ps -ef | grep redis

10.关闭Redis服务 shutdown

在这里插入图片描述

11.再次查看进程是否存在

12.后面我们会使用单机多Redis启动集群测试

5、测试性能

redis-benchmark： 是一个压力测试工具！

Redis官方提供的性能测试工具，Redis-benchmark 命令参数选项如下：

在这里插入图片描述

简单测试：

先开启redis-server、redis-cli，并查看运行情况

重新开启一个终端

# 测试：100个并发连接 100000请求
redis-benchmark -h localhost -p 6379 -c 100 -n 100000
redis-benchmark -n 10000  -q

在这里插入图片描述

在这里插入图片描述

6、基础知识

redis默认有16个数据库

在这里插入图片描述

默认使用的第0个;

16个数据库为：DB 0~DB 15
默认使用DB 0 ，可以使用select n切换到DB n，dbsize可以查看当前数据库的大小，与key数量相关。

127.0.0.1:6379> config get databases # 命令行查看数据库数量databases
1) "databases"
2) "16"

127.0.0.1:6379> select 8 # 切换数据库 DB 8
OK
127.0.0.1:6379[8]> dbsize # 查看数据库大小
(integer) 0

# 不同数据库之间 数据是不能互通的，并且dbsize 是根据库中key的个数。
127.0.0.1:6379> set name sakura 
OK
127.0.0.1:6379> SELECT 8
OK
127.0.0.1:6379[8]> get name # db8中并不能获取db0中的键值对。
(nil)
127.0.0.1:6379[8]> DBSIZE
(integer) 0
127.0.0.1:6379[8]> SELECT 0
OK
127.0.0.1:6379> keys *
1) "counter:__rand_int__"
2) "mylist"
3) "name"
4) "key:__rand_int__"
5) "myset:__rand_int__"
127.0.0.1:6379> DBSIZE # size和key个数相关
(integer) 5

keys * ：查看当前数据库中所有的key。

flushdb：清空当前数据库中的键值对。

flushall：清空所有数据库的键值对。

Redis是单线程的，Redis是基于内存操作的。

所以Redis的性能瓶颈不是CPU,而是机器内存和网络带宽。

那么为什么Redis的速度如此快呢，性能这么高呢？QPS达到10W+

Redis为什么单线程还这么快？

  • 误区1：高性能的服务器一定是多线程的？
  • 误区2：多线程（CPU上下文会切换！）一定比单线程效率高！

核心：Redis是将所有的数据放在内存中的，所以说使用单线程去操作效率就是最高的，多线程（CPU上下文会切换：耗时的操作！），对于内存系统来说，如果没有上下文切换效率就是最高的，多次读写都是在一个CPU上的，在内存存储数据情况下，单线程就是最佳的方案。

NoSQL概述与Redis入门-redis安装与测试 的学习笔记到此完结，笔者归纳、创作不易，大佬们给个3连再起飞吧

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/303895.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

基于zookeeper实现服务节点HA主备自动切换

基于zookeeper实现服务节点HA主备自动切换

文章目录 前言一、架构图和流程图二、流程说明1.服务启动初始化ZK、注册所有服务节点信息-MasterRegister2.创建、运行服务节点，并管理服务节点-LeaderSelectorZkClient。3.典型场景-调度服务单体执行-DigitalEmpTask 总结参考 前言 Spring Boot 主备切换可以采用数…
阅读更多...
Go语言学习笔记

Go语言学习笔记

go变量和常量-初窥门径-CSDNGo技能树 安装检查go版本 在线运行 在线代码运行 (gotribe.cn) 新建一个文件夹 打开终端执行 go mod init learngo。这将创建一个名为go.mod 新建文件 main.go内容 package mainfunc main() {println("Hello world") } package main…
阅读更多...
《BackTrader量化交易图解》 1～7 章

《BackTrader量化交易图解》 1～7 章

文章目录 1. BackTrader 简介1.1 BackTrader 量化软件特点1.2 模块介绍 2. 数据预处理2.1 数据格式2.2 Lines 内部数据格式 3. 策略编程3.1 SQN 指数&策略评估参数3.2 量化金融指标3.3 策略编程模板 4. Buy 买入策略5. Sell 卖出策略5.1 Position 仓位检查5.2 Smart Stakin…
阅读更多...
【Vue3】2-4 : 声明式渲染及响应式数据实现原理

【Vue3】2-4 : 声明式渲染及响应式数据实现原理

本书目录：点击进入 一、声明式渲染 1.1 什么是JS表达式：能够进行赋值的操作 ▶ 正确 ▶ 错误示例 二、示例：2秒后，页面中 message 由 hello world 变成 hi vue ▶ 效果 三、原理：利用ES6的Proxy对象对底层进…
阅读更多...
【方法】如何合并7z分卷压缩文件？

【方法】如何合并7z分卷压缩文件？

压缩7z文件时，设置分卷压缩可以更方便文件的传输、存储和管理，如果后续不需要分卷了，除了可以将分卷文件解压出来，再压缩成一个文件，还可以利用解压缩软件，直接合并分卷文件。 我们常用的7-Zip和WinRAR都可…
阅读更多...
【Linux Shell】9. 流程控制

【Linux Shell】9. 流程控制

文章目录 【 1. if else 判断 】1.1 if1.2 if else1.3 if elif else1.4 实例 【 2. case 匹配 】【 3. 循环 】3.1 for 循环3.2 while 循环3.3 until 循环3.4 无限循环3.5 跳出循环3.5.1 break 跳出所有循环3.5.2 continue 仅跳出当前循环 【 1. if else 判断 】 1.1 if fi 是…
阅读更多...
Hyperledger Fabric 管理链码 peer lifecycle chaincode 指令使用

Hyperledger Fabric 管理链码 peer lifecycle chaincode 指令使用

链上代码（Chaincode）简称链码，包括系统链码和用户链码。系统链码（System Chaincode）指的是 Fabric Peer 中负责系统配置、查询、背书、验证等平台功能的代码逻辑，运行在 Peer 进程内，将在第 14 …
阅读更多...
常见锁策略

常见锁策略

目录 乐观锁和悲观锁 重量级锁和轻量级锁 自旋锁和挂起等待锁 互斥锁和读写锁 公平锁和非公平锁 可重入锁和不可重入锁 synchronized内部的工作原理 锁消除 锁粗化 CAS 锁策略，即加锁过程（处理冲突时）时的处理方式 乐观锁和悲观锁…
阅读更多...
1panel中的sftpgo webadmin 更新修改docker容器文件的配置教程

1panel中的sftpgo webadmin 更新修改docker容器文件的配置教程

本篇文章主要讲解1panel中的sftpgo webadmin 更新修改docker容器文件的配置教程，适合sftpgo webadmin和1panel系统用户配置时使用。 作者：任聪聪 rccblogs.com 日期：2024年1月8日 sftpgo是无法直接直接更改容器内部的网站目录的，但…
阅读更多...
酷开科技创新玩法寻找OTT大屏营销新增长

酷开科技创新玩法寻找OTT大屏营销新增长

随着技术与数据入局OTT领域，程序化投放、数据追踪、人群定位等等功能也正逐步深入到大屏营销，很大程度上推动了OTT行业的快速发展。围绕OTT大屏营销，品牌的机会点早已脱离了传统营销模式，新营销的价值正在被重构。 消费者在接触品…
阅读更多...
小游戏选型(一):游戏化设计助力直播间互动和营收

小游戏选型(一):游戏化设计助力直播间互动和营收

一、社交直播间小游戏火爆 大家好，作为一个技术宅和游戏迷，今天来聊聊近期爆火的社交直播间小游戏的潮流。喜欢冲浪玩社交产品的小伙伴会发现，近期各大平台都推出了直播间社交小游戏，直播间氛围火爆，小游戏玩法简单&a…
阅读更多...
市场上最受欢迎的6 大顶级安卓手机解锁软件

市场上最受欢迎的6 大顶级安卓手机解锁软件

Android 智能手机不断发展，每天都有新的特性和功能加入。然而，密码仍然是一个大问题，因为我们的个人数据存储在这些设备上。因此，忘记密码是令人沮丧的。 不过别担心。有很多可用的 Android 解锁软件可以绕过 Android 设备的锁定…
阅读更多...
Prompt提示工程上手指南:基础原理及实践(一)

Prompt提示工程上手指南:基础原理及实践(一)

想象一下，你在装饰房间。你可以选择一套标准的家具，这是快捷且方便的方式，但可能无法完全符合你的个人风格或需求。另一方面，你也可以选择定制家具，选择特定的颜色、材料和设计，以确保每件家具都符合你的喜…
阅读更多...
CSS 圆形分割按钮动画 带背景、图片

CSS 圆形分割按钮动画 带背景、图片

<template><view class="main"><view class="up"> <!-- 主要部分上 --><button class="card1"><image class="imgA" src="../../static/A.png"></image></button><butt…
阅读更多...
基于机器视觉的车牌检测-字符识别

基于机器视觉的车牌检测-字符识别

一般步骤 字符识别常用的有以下四类&#xff1a; 第一类&#xff1a;结构识别方法。 第二类&#xff1a;统计识别方法。 第三类&#xff1a;BP神经网络方法。 第四类&#xff1a;模板匹配方法。 模板匹配方法是最常用的方法。 主要内容 模板匹配的车牌识别包括以下几点主…
阅读更多...
前端面试题集合一

前端面试题集合一

Canvas是什么&#xff1f;怎样写Canvas&#xff1f; Canvas是HTML5的一个元素&#xff0c;它使用JavaScript在网页上绘制图形。Canvas是一个矩形区域。它的每一个像素都可以由HTML5语言来控制。使用Canvas绘制路径、框、圆、字符和添加图像有几种方法。 如果要在我们的HTML文…
阅读更多...
Socket closed 异常解决方案：如何解决 JMeter 压测中的问题

Socket closed 异常解决方案：如何解决 JMeter 压测中的问题

问题描述 JMeter 压测时会报 java.net.SocketException: Socket closed java.net.SocketException: Socket closed at java.net.PlainSocketImpl.socketConnect(Native Method) at java.net.AbstractPlainSocketImpl.doConnect(AbstractPlainSocketImpl.java:350) at java.ne…
阅读更多...
将项目同时提交到GitHub和码云Gitee上面，GitHub与Gitee同步

将项目同时提交到GitHub和码云Gitee上面，GitHub与Gitee同步

多个远程仓库同时使用 新建GitHub仓库 创建成功 在终端中创建仓库 如果你想在本地机器上创建Git仓库&#xff0c;或者想添加一个文件夹或文件到已经存在的Git仓库中&#xff0c;你应该在终端中创建你的Git仓库。在你可以通过终端来创建一个Git仓库。以下是在终端中创建Git仓…
阅读更多...
如何选择猫粮：哪种主食冻干猫粮比较好

如何选择猫粮：哪种主食冻干猫粮比较好

许多铲屎官可能认为&#xff0c;只需给猫咪喂食猫粮就足够了。然而&#xff0c;猫咪实际上是肉食动物&#xff0c;对蛋白质的需求非常高。冻干猫粮采用低温真空干燥处理技术&#xff0c;将鲜肉经过预冻、升华、解析三个过程&#xff0c;去除水分的同时保持蛋白质等营养物质不变…
阅读更多...
虚拟机Linux硬盘扩容

虚拟机Linux硬盘扩容

扩容前(20G)&#xff1a; 扩容后(60G)&#xff1a; 步骤&#xff1a; 1. 点击 虚拟机 -> 设置 -> 硬件 -> 硬盘(SCSI) -> 扩展(E)... -> 输入想要扩容大大小 -> 扩展(E) 2. 运行虚拟机&#xff0c;查看根目录属于那个文件系统&#xff0c;我的是 /dev/sda1…
阅读更多...
最新文章

Copyright @ 2022~2023