[个人感悟] 缓存应该考察哪些问题?

在这里插入图片描述


前言

缓存, 根据冯诺依曼计算机模型, 无非是为了更高效的交互, 使用内存IO替换本地磁盘IO. 又因为内存的稀缺性, 其必然存储的是热点数据, 且较小的数据. [虽然直至今日, 已有使用缓存作为数据库的使用, 但是与磁盘IO相比, 其价格仍是数倍之多.]

当涉及缓存问题时, 又分为本地缓存和分布式缓存, 此2个方向. 且对于缓存而言, 除了询问其基本使用外, 还会寻味其中相关的经典问题, 缓存击穿&缓存穿透&缓存雪崩, 以及如何保证缓存一致性. 这2个经典问题.


问题

问题 - 缓存

  • 为什么需要缓存, 缓存的意义和底层原理是什么?
  • 讲一讲你常用的缓存工具? [单机 & 分布式]

问题 - 本地缓存

  • 常用的本地缓存是什么? Spring 默认提供的缓存实现是什么?

问题 - Redis(1)

  • 为什么要使用Redis缓存? (Redis 缓存的优势)
  • Redis是单线程还是多线程? 如何理解?
  • Redis 常见的数据类型有哪些? 各有哪些运行场景?
  • Redis 高级数据类型? 各有哪些运行场景?

问题 - Redis(2)

  • 如何使用Redis实现分布式锁?
  • 是否使用过Redis事务?生产过程中是否使用? [为什么不使用]
  • Reids持久化方式有哪些? 其有什么区别和优势?
  • 讲一讲Redis的渐进式Rehash过程?
  • Redis的过期策略有哪些?
  • Redis bgsave的同步策略有了解么?
  • Redis 是否使用keys命令? 其会导致什么影响?
  • Redis 如何计算key的大小, 并实施监控?
  • Redis 主从, 哨兵, 集群问题. 介绍下这3种架构的区别和优势?

问题 - 缓存经典问题

  • 什么是缓存穿透? 如何解决?
  • 什么是缓存击穿? 如何解决?
  • 什么是缓存雪崩? 如何解决?
  • 什么是缓存热点数据预热? 通常解决什么问题?
  • 多级缓存架构问题?
  • 如何保证Mysql和Redis缓存的双写一致性?
  • 什么是BigKey? 如何解决?
  • 什么是热点Key? 如何解决?

解答

Redis相关的问题个人认为不再赘述. 其基本都有现成的解决策略. 这里捡主要的问题进行回答.

问题 - 本地缓存

Spring 3.x使用Guava作为本地缓存默认实现, 4.x使用CaffeineCache.

解答-Redis

  • 如何使用Redis实现分布式锁?

问题一般是: “你们开发过程种如何使用Redis的?” 其中回答可以引申至Redis锁. 关于Redis锁, 其Redission包内有非常成功的实现. 其要点如下:

  1. 设置单一锁. 锁仅第一个申请线程才可以获取.
  2. 设置锁自动失效时间. 考虑如果申请线程失效, 无法自动释放锁, 导致死锁.
  3. 设置守护线程, 对锁进行续约. watchdog策略, 可以使用时间轮进行优化定时任务.
  4. 设置获取锁线程. 必须由当前线程对锁进行释放.
  5. 设置获取锁线程. 当前线程可以重入锁.

解答-缓存经典问题

缓存穿透, 缓存击穿, 缓存雪崩. 基本是缓存常见的3个实战问题. 笔者之前常常分不清穿透和击穿, 这里给出一个小技巧.
穿透, 强调的是大量无效Key, 导致缓存似乎无用.
击穿. 强调是大量请求访问数据库. 导致突然的流量异常.

  • 什么是缓存穿透? 如何解决?

根据上述描述. 缓存穿透, 某些用户经常查询不存在的key, 导致多次访问数据库. 好似缓存不存在, 请求透过缓存, 直接访问数据库. 其解决方式主要有2种:

  1. 如果无用键较少. 可以使用 unknow_key=null.的策略进行预防.
  2. 使用布隆过滤器. 已存在键进行写入时, 需要更新布隆过滤器的bitmap.
  3. 如果是黑客攻击等. 需要设置相关黑白名单进行防御.
  • 什么是缓存击穿? 如何解决?

根据上述描述. 缓存击穿, 指某一常用的key失效, 导致多个请求, 同时对于数据库进行访问. 导致数据库压力过大.
其主要解决方式主要有2种:

  1. 热点key设置永不过期.
  2. 热点数据请求时, 设置锁. 仅使用一个线程进行获取并更新缓存, 其余线程唤醒后, 优先请求缓存数据.
  • 什么是缓存雪崩? 如何解决?

缓存雪崩. 多个热点数据同时失效, 导致大量缓存失效. 其主要解决方式2种:

  1. 热点key设置永不过期.
  2. 缓存时间设置 当前时间+[1-5分钟随机数] 可以使用框架完成.
  • 什么是缓存热点数据预热? 通常解决什么问题?

这个问题一般不这么问. 一般可以作为项目优化点和亮点进行. 热点数据预热, 即项目启动时, 或者秒杀活动等开启前, 将需要秒杀或者使用的数据提前放置缓存, 放置进行备动添加. 优点是提升效率. 缺点是可能导致部分非核心数据写入缓存.

  • 多级缓存架构问题?

多级缓存通常指. Mysql - Java程序本地缓存 - Redis.

  1. 缓存访问. 本地 - Reids - Mysql顺序.
  2. 缓存更新. Mysql更新 - Reids失效 - 本地失效
  • 如何保证Mysql和Redis缓存的双写一致性?
    更新Mysql后, 使Redis内缓存失效. 用户再次命中时, 再次写入缓存.

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mfbz.cn/a/716288.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

java基础知识总结【markdown】

java基础知识总结【markdown】 开发工具Java数据类型浮点数使用陷阱: 2.7 和 8.1 / 3 比较 常用字符编码基本数据类型转换关键字,保留字**原码、反码、补码** 开发工具 editplus、notepad、Sublime Text、IDEA、Eclipse Java数据类型 浮点数使用陷阱: 2.7 和 8.1 …

开源复刻apple 数学笔记;纯C++实现了ChatGLM系列模型;腾讯混元文生图模型发布新版本并开源训练代码

✨ 1: AI Math Notes AI Math Notes 是一个交互式绘图应用,可绘制并计算数学方程。 AI Math Notes 受到Apple在WWDC 2024上的“Math Notes”演启发,开发的一个互动式绘图应用程序,用户可以在画布上绘制数学方程。一旦方程被绘制完成&#x…

英伟达发布Nemotron-4 340B通用模型:专为生成合成数据设计的突破性AI

引言 2023年6月14日,英伟达发布了Nemotron-4 340B通用模型,专为生成训练大语言模型的合成数据而设计。这一模型可能彻底改变训练大模型时合成数据的生成方式,标志着AI行业的一个重要里程碑。本文将详细介绍Nemotron-4 340B的各个方面&#x…

【Stable Diffusion教程】AI绘画工具SD如何安装使用?三种方法带你轻松上手!(附安装包和云端部署教程)

大家好,我是向阳 AI绘画专业工具Stable Diffusion在哪里用怎么安装?这一期给大家介绍三种使用SD的方法,无论你有没有专业显卡都能轻松上手SD哦~ 一、SD本地部署秋葉安装包安装方法 如果你有进一步的需求,想要学习SD…

MySQL Server和Server启动程序(二)

mysql.server — MySQL Server启动脚本 Unix和类Unix系统上的MySQL发行版包括一个名为MySQL.server的脚本,该脚本使用mysqld_safe启动MySQL服务器。它可以在Linux和Solaris等系统上使用,这些系统使用System V风格的运行目录来启动和停止系统服务。它也被…

HTTP 概述

HTTP 概述 HTTP 是一种用于获取资源(如 HTML 文档)的协议。 它是 Web 上任何数据交换的基础,它是一种客户端-服务器协议,这意味着请求由接收方(通常是 Web 浏览器)发起。 一个完整的文档是从获取的不同子文…

基于GA遗传算法的多机无源定位系统GDOP优化matlab仿真

目录 1.程序功能描述 2.测试软件版本以及运行结果展示 3.核心程序 4.本算法原理 5.完整程序 1.程序功能描述 基于GA遗传算法的多机无源定位系统GDOP优化matlab仿真。仿真输出GDOP优化结果,遗传算法的优化收敛曲线以及三维空间坐标点。 2.测试软件版本以及运行…

ArcGIS制作规划图卫星影像地图虚化效果

文章目录 一、效果展示二、加载数据三、效果制作四、注意事项一、效果展示 二、加载数据 订阅专栏后,从csdn私信查收实验数据资料,加载ArcGIS制作规划图卫星影像地图虚化效果.rar中的数据,如下所示: 三、效果制作 1. 创建掩膜图层 新建一个矢量图层,因为主要是作图需要…

SAP 采购订单 价格 条件权限控制 授权账户

采购订单 价格 条件权限控制 授权账户 1、事务代码 me21/22/23/N 2、权限对像如下几个 M_BEST_BSA/EKG/EKO/WRK ACTVT 09 SELECT DISTINCT a.* FROM ( SELECT DISTINCT agr_users.uname FROM agr_1251INNER JOIN agr_users ON agr_1251.agr_name agr_users.agr_name AND…

ps贴图技巧

去花瓣网找一个抱枕素材2.框选抱枕区域,填充色块,再转化位置智能图像,在ctrlt变形,再自定义变形(膨胀) 3.把要贴的素材拖进色块区域

Dell ECS 数据移动到 MinIO

这里写自定义目录标题 欢迎使用Markdown编辑器配置源存储桶和目标存储桶配置Dell ECS源存储桶配置 MinIO 目标存储桶 数据移动策略向 MinIO 移动数据使用 Dremio 向 MinIO 进行数据移动 数据移动监控和记录为什么要迁移到 MinIO?新的改变功能快捷键合理的创建标题&a…

SpringBoot的简单介绍

1.什么是spring boot 简单的说,spring boot就是整合了很多优秀的框架,不用我们自己手动的去写一堆xml来进行配置。 从本质上来说,Spring Boot就是Spring,它做了那些没有它你也会去做的Spring Bean配置。它使用“习惯优于配置”(…

基于R-Tree的地理空间数据分析加速

几年前,我正在做一个业余项目。我想创建一个 Web 应用程序,推荐当地的特色景点,例如咖啡馆、书店或隐藏的酒吧。我的想法是在地图上显示用户触手可及的所有兴趣点。我的数据集中有数十万个点,我必须巧妙地过滤用户给定范围内的数据…

GPU的工作原理

location: Beijing 1. why is GPU CPU的存储单元和计算单元的互通过慢直接促进了GPU的发展 先介绍一个概念:FLOPS(Floating Point Operations Per Second,浮点运算每秒)是一个衡量其执行浮点运算的能力,可以作为计算…

▶《强化学习的数学原理》(2024春)_西湖大学赵世钰 Ch2 贝尔曼公式

PPT 截取有用信息。 课程网站做习题。总体 MOOC 过一遍 1、学堂在线 视频 习题 2、相应章节 过电子书 复习 GitHub界面链接 3、总体 MOOC 过一遍 学堂在线 课程页面链接 中国大学MOOC 课程页面链接 B 站 视频链接 PPT和书籍下载网址: 【github链接】 onedrive链接…

算法课程笔记——线段树维护哈希

算法课程笔记——线段树维护哈希 提前空出来

手机NFC功能别再闲置,打开它,体验安全、智能生活!

最初仅在中高端手机中普及的NFC功能,随着技术成熟、成本降低,如今已逐渐成为千元手机的标配,在华为等一众品牌手机中广泛应用。而随着国内NFC功能应用的兴起,围绕NFC技术耗电情况与潜在风险的讨论也越来越多。其实,了解…

GStreamer——教程——基础教程4:Time management

基础教程4:Time management(时间管理) 目标 本教程展示了如何使用GStreamer时间相关工具。特别是: 如何查询管道以获取流位置或持续时间等信息。如何寻找(跳转)到流内的不同位置(时间&#x…

图知识蒸馏综述:算法分类与应用分析

源自:软件学报 作者:陈哲涵 黎学臻 注:若出现无法显示完全的情况,可 V 搜索“人工智能技术与咨询”查看完整文章 摘 要 图数据, 如引文网络, 社交网络和交通网络, 广泛地存在现实生活中. 图神经网络凭借强大的表现力受到广泛…

PyQt5 生成py文件不能运行;pushButton点击事件;QTextEdit 获取输入框内容

目录 cant open file c.pyuic: c.pyuic $FileName$ -o $FileNameWithoutExtension$.p PyQt5 生成py文件不能运行 pushButton点击事件 QTextEdit 获取输入框内容 整体运行代码: Creating a Qt Widget Based Application | Qt Creator Manual cant open file c.pyuic: c.…