数据结构与算法笔记:基础篇 - 链表(上):如何实LRU缓存淘汰算法

概述

本章聊聊 “链表” 这个数据结构。学习链表有什么作用?

我们先来讨论一个经典的链表应用场景,那就是 LRU 缓存淘汰算法。

缓存是一种提高数据读取性能的技术,在硬件设计、软件开发中有着非常广泛地应用,比如场景的 CPU 缓存、数据库缓存、浏览器缓存等等。

缓存的大小有限,当缓存被存满时,哪些数据应该被清理,哪些数据应该被保留?这就需要缓存淘汰策略来决定。场景的策略有:先进先出策略 FIFO、最少使用策略 LFU、最近最少使用策略 LRU。

好了,那如何使用链表来实现 LRU 缓存淘汰策略呢? 我们带着这个问题开始本章的学习吧!


五花八门的链表结构

相比数组,链表是一种稍微复杂一点的数据结构。这两个非常基础、非常常用的数据结构,也会常常放到一块来比较。我们先看下,这两者有什么区别。

我们先从底层的存储结构上来看下。

为了直观地对比,我画了一张图。从图中我们看到,数组需要一块连续的内存空间来存储,对内存的要求比较高。如果我们肾气一个 100MB 大小的数组,当内存中没有连续的、足够大的内存空间时,即便内存的剩余总可用空间大于 100MB,仍然会申请失败。

而链表恰恰相反,它并不需要一块连续的内存空间,它通过 “指针” 将一组零散的内存块串联起来使用,所以如果我们申请的是 100MB 大小的链表,根本不会有问题。

在这里插入图片描述
链表结构五花八门,本章重点给你介绍三种最常见的链表结构,它们分别是:单链表、双线链表和循环链表。

首先来看最简单、最常用的单链表

刚刚讲到,链表通过指针将一组零散的内存块串联在一起。其中,我们把内存块成为链表的 “结点”。为了将所有的节点串联起来,每个链表的结点除了存储数据之外,还需要记录链上的下一个节点的地址。如图所示,我们把这个记录下个结点地址的指针叫做后继指针 next

在这里插入图片描述

从上图中,可以发现,其中有两个节点是比较特殊的,它们分别是第一个节点和最后一个结点。第一个结点叫头结点,最后一个结点叫尾节点。其中,头结点用来记录链表的基础地址。有了它,就可以遍历整条链表。而尾节点特殊的地方是:指针不是指向下一个节点,而是指向一个空地址 NULL,表示链表上最后一个结点。

与数组一样,链表也支持数据的查找、插入和删除操作。

我们知道,在进行数组的插入、删除操作时,为了保持内存数据的连续性,需要做大量的数据搬移,所以时间复杂度是 O ( n ) O(n) O(n)。而在链表中插入或者删除一个数据,并不需要为了保持内存的连续性而搬移结点,因为链表的存储空间本身就不是连续的。所以,在链表中插入和删除一个数据是非常快速的。

下图就是链表插入和删除操作,我们只需要考虑相邻节点的指针改变,所以对应地时间复杂度是 O ( 1 ) O(1) O(1)
在这里插入图片描述

有利就有弊。链表想要随机访问第 k 个元素,就没有数组那么高效了。因为链表中的数据并非连续存储的,所以无法像数组那样,根据首地址和下标,通过寻址公式就能直接计算出对应地内存地址,而是需要根据指针一个结点一个结点地依次遍历,直到找到相应的节点。

你可以把链表想象成一个队伍,队伍中的每个人都只知道自己后面的人是谁,所以但我们希望知道排在第 k 个人是谁的时候,我们就需要从第一个人开始,一个一个往下数。所以,链表随机访问的性能没有数组好,需要 O ( n ) O(n) O(n) 的时间复杂度。

好了,单链表就介绍完了,接下来看另外两个复杂的升级版,循环链表双向链表

循环链表是一种特殊的单链表。实际上,循环链表也很简单。它跟单链表唯一的区别就在尾结点。单链表的尾结点指向空地址,表示这是最后的结点了。而循环链表的尾结点指针是指向链表的头结点。从下图中,你应该可以看出来,它像一个环一样首尾相连,所以叫作 “循环” 链表。

在这里插入图片描述
和单链表相比,循环链表的优点是从链尾到链头比较方便。当要处理的数据具有环型结构特点时,就特别适合采用循环链表。尽管单链表也可以实现,但是用循环链表实现的话,代码就会简洁很多。

单链表和循环链表是不是都不难?接下来再看稍微复杂的双向链表

单向链表只有一个方向,结点只有一个后继指针 next。而双向链表,它支持两个方向,每个结点不止有一个后继指针 next 指向后面的结点,还有一个前驱指针 prev 指向前面的结点。
在这里插入图片描述
图中可以看出,双向链表需要额外的两个空间来存储后继结点和前驱结点地地址。所以,如果存储同样多的数据,双向链表要比单链表占用更多的内存空间。虽然两个指针比较浪费存储空间,但可以支持双向遍历,这样也带来了双向链表操作的灵活性。相比单链表,双链表适合解决哪种问题呢?

从结构上看,双向链表可以支持 O ( 1 ) O(1) O(1) 时间复杂度的情况找到前驱结点,正式这样的特点,也使双向链表在某些情况下插入、删除等操作都要比单链表简单、高效。

你可能会说,单链表的插入、删除操作的时间复杂度已经是 O ( 1 ) O(1) O(1) 了,双向链表还能再怎么高效呢?别着急,刚刚的分析偏理论,很多数据结构和算法书籍中都这么讲,但这种说法实际上是不准确的,或者说是有先决条件的。下面再分析下两个链表的操作。

先看下删除操作

在实际的软件开发中,从链表中删除一个数据无外乎两种情况:

  • 删除结点中 “值等于某个给定值” 的结点。
  • 删除给定指针指向的结点。

对于第一种情况,不管是单向链表还是双向链表,为了查找到值等于给定值的结点,需要从头结点开始一个一个一次遍历对比,直到找到对应结点,然后再通过前面讲的指针操作将其删除。

尽管单纯的删除操作时间复杂度是 O ( 1 ) O(1) O(1),但遍历查找的时间是主要的耗时点,对应的时间复杂度为 O ( n ) O(n) O(n)。根据时间复杂度分析中的加法法则,删除值等于给定值的结点对应地链表操作的总时间复杂度为 O ( n ) O(n) O(n)

对于第二种情况,我们已经找到了要删除的结点,但删除某个结点 q 需要知道其前驱结点,而单链表并不支持直接获取前驱结点,所以,为了找到前驱结点,我们还是要从头开始遍历链表,直到 p->next = q,说明 pq 的前驱结点。

但是对于双向链表来说,这种情况就比较有优势了。因为双向链表中的结点已经保存了前驱结点地指针,不需要像单链表那样遍历。所以,针对第二种情况,单链表删除操作需要 O ( n ) O(n) O(n) 的时间复杂度,而双向链表只需要在 O ( 1 ) O(1) O(1) 的时间复杂度内就搞定了。

同理,如果我们希望在链表的某个指定结点前面插入一个结点,双向链表比单链表有很大的优势。双向链表可以在 O ( 1 ) O(1) O(1) 时间复杂度搞定,而单向链表需要 O ( n ) O(n) O(n) 的时间复杂度。你可以参照我刚刚讲过的删除操作自己分析下。

除了插入、删除操作有优势之外,对于一个有序链表,双向链表的按值查找的效率也要比单链表高一些。因为,我们可以记录上次查找的位置 p,每次查询时,根据要查找的值与 p 的大小关系,决定是往前还是往后查找,所以平均只需要查找一半的数据。

现在,你有没有觉得双向链表要比单链表更加高效呢?这就是为什么在实际软件开发中,双向链表尽管比较费内存,但还是比但链表的应用更加广泛的原因。如果你熟悉 Java 语言,你肯定用于 LinkedHashMap 这个容器,它内部就用到了双向链表这种数据结构。

实际上,这里有一个更加重要的知识点需要掌握,那就是用空间换时间的设计思想。当内存空间充足的时候,如果我们更加追求代码的执行速度,就可以选择空间复杂度相对较高、但时间复杂度相对较低的算法或者数据结构。相反,如果内存比较紧缺,比如代码跑在手机或者单片机上,这个时候就要反过来用时间换空间的设计思路。

缓存实际上就是利用空间换时间的设计思想。如果我们把数据存储在硬盘上,会比较节省内存,但每次查找数据都要询问一次硬盘,会比较慢。但如果我们通过缓存技术,事先将数据加载在内存中,虽然会比较耗费内存空间,但是每次数据查找的速度就大大提高了。

总结一下,对于执行较慢的程序,可以通过消耗更多的内存(空间换时间)来进行优化;而消耗过多的内存,可以通过消耗更多的时间(时间换空间)来降低内存的消耗。

了解了循环链表和双向链表,如果把这两种表整合在一起就是一个新的链表:双向循环链表

在这里插入图片描述

链表 VS 数组性能大比拼

通过前面内容的学习,我们知道数组和链表是两种截然不同的内存组织方式。正式因为内存存储的区别,它们插入、删除、随机访问操作的时间复杂度正好相反。

时间复杂度数组链表
插入或删除 O ( n ) O(n) O(n) O ( 1 ) O(1) O(1)
随机查找 O ( 1 ) O(1) O(1) O ( n ) O(n) O(n)

不过数组和链表的对比,不能局限于时间复杂度。而且,在实际的开发中,不能仅仅利用复杂度分析就决定使用哪个数据结构来存储数据。

数组简单易用,在实现上使用的是连续的内存空间,可以借助 CPU 的缓存机制,预读数组中的数据,所以访问效率更高。而链表在内存中并不是连续存储的,所以对 CPU 缓存不友好,没有办法预读。

数组的缺点是大小固定,一经声明就要占用整块连续内存空间。如果声明的数组过大,系统可能就没有足够的连续空间分配给它,导致 “内存不足”。如果声明的数组过小,则可能出现不够用的情况。这时只能申请一个更大的内存空间,把原数组拷贝进去,非常耗时。链表本身没有大小限制,天然支持动态扩容,我觉得这也是它与数组最大的区别。

虽然 Java 中的 ArrayList 也可以支持动态扩容,但是扩容时就会申请一个更大的空间,并将数据拷贝进去,而数据拷贝的操作是非常耗时的。

比如,ArrayList 存储了 1GB 的数据,这个时候已经没有空闲空间了,当我们再插入数据时,ArrayList 会申请一个 1.5GB 的存储空间,并且把原来那 1GB 的数据拷贝到新申请的空间上。听起来是不是很耗时?

此外,如果你的代码对内存的使用非常苛刻,那数组就更适合你。因为链表中的每个结点需要消耗额外的空间去存储一份指向下一个结点地指针,所以内存消耗会翻倍。而且,对链表进行频繁的插入、删除操作,还会导致频繁的内存申请和释放,容易造成内存碎片,如果是 Java 语言,就可能会导致频繁的 GC(垃圾回收)。

所以,在实际的开发中,针对不同类的项目,要根据具体情况,权衡纠结选择数组还是链表。

如何使用链表实现 LRU 缓存淘汰算法

大致思路是这样的:我们维护一个有序单链表,越靠近链表尾部的结点是越早之前访问的。当有一个新的数据被访问时,我们从链表头开始顺序遍历链表。

1.如果此数据之前已经被缓存在链表中了,我们遍历得到这个数据对应地结点,并将其从原来的位置删除,然后再插入链表的头部。

2.如果此数据没有在缓存链表中,又可以分为两种情况:

  • 如果此时缓存未满,则将此节点直接插入到链表的头部;
  • 如果此时缓存满了,则链表尾结点删除,将新的数据结点插入链表的头部。

这样,就用链表实现了一个 LRU,是不是很简单?

现在再看下缓存访问需要的时间复杂度是多少。因为不管缓存有没有满,都需要遍历一遍链表,所以这种基于链表的实现思路,缓存访问的时间复杂度为 O ( n ) O(n) O(n)

实际上,可以继续优化这个实现思路。比如引入散列表(Hash table)来记录每个数据的位置,将缓存访问的复杂度降到 O ( 1 ) O(1) O(1)。因为还没有讲到散列表这种数据结构,所以这个优化方法现在就不细说了,等讲到它的时候,再作详细介绍。

小结

帮助介绍了与数组 “相反” 的数据结构,链表。它和数组一样,也是非常基础、非常常用的数据结构。不过链表要比数组复杂点,从普通的单链表衍生出来好几种链表结构,比如双向链表、循环链表、双向循环链表。

和数组相比,链表更适合插入、删除操作频繁的场景,查询的时间复杂度较高。不过,在具体的开发中,要对数组和链表的各种性能进行对比,综合来选择使用两者中的哪一个。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/671540.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

字符串-将str1编辑成str2所需最小代价(hard)

一、题目描述 二、解题思路 该题目使用动态规划的思想来解决问题 刚开始我还在想,删除添加的操作可以等价为替换操作,如果替换操作的Cost大于删除添加组合操作的Cost之和就需要把 rcdcic。 但是在动态规划中,如果对三种不同的操作方式进行…

C++ 的 Tag Dispatching(标签派发) 惯用法

目录 1.概述 2.标准库中的例子 3.使用自己的 Tag Dispatching 3.1.使用 type traits 技术 3.2.使用 Type_2_Type 技术 4.Tag Dispatching的使用场景 5.总结 1.概述 一般重载函数的设计是根据不同的参数决定具体做什么事情,编译器会根据参数匹配的原则确定正确…

域内攻击--->基于资源的约束委派(RBCD)

不同于约束和非约束委派,基于资源的约束性委派可以就难的多了!! 前方高能 ,准备上车!! 目录 1.基于资源的约束性委派(RBCD) 2.谁能设置RBCD 3.机器入域账号的普及 4.域树的搭建 5.配置RBCD 6.通过域创…

【前端部署——vercel】部署next.js使用了prisma的项目

部署流程参考 https://blog.csdn.net/qq_51116518/article/details/137042682 问题 PrismaClientInitializationError: Prisma has detected that this project was built on Vercel, which caches dependencies. This leads to an outdated Prisma Client because Prisma’s …

kali系统baopoWiFi密码

kali系统baopoWiFi密码,仅供学习 取决强大的密码字典,如果别人密码设置的足够安全,也无法破解成功,并不是100%破解 一、准备一个无线网卡,需要免驱动,最好知道频率2.4HGZ还是5.0GHZ 二、插上USB接口,vmware模拟器选择连接虚拟机 三、输入命…

Java Spring Boot 从必应爬取图片

获取图片主要就是通过必应图片页面控制台的元素,确认图片和标题在哪个类中(浏览器 F12) 引入依赖 这里需要引入两个依赖 jsoup 和 hutool maven依赖网站地址:Maven Repository: Search/Browse/Explore (mvnrepository.com) 挑选…

Java如何读取resources目录下的文件路径(九种代码示例教程)

本文摘要:Java如何读取resources目录下的文件路径 😎 作者介绍:我是程序员洲洲,一个热爱写作的非著名程序员。CSDN全栈优质领域创作者、华为云博客社区云享专家、阿里云博客社区专家博主。公粽号:洲与AI。 &#x1f91…

翻译《The Old New Thing》- What a drag: Dragging a Uniform Resource Locator (URL)

What a drag: Dragging a Uniform Resource Locator (URL) - The Old New Thing (microsoft.com)https://devblogs.microsoft.com/oldnewthing/20080312-00/?p23133 Raymond Chen 2008年03月12日 麻烦的拖拽:拖拽统一资源定位符(URL) 简要 …

HALCON-从入门到入门-图像格式的互相转换

1.废话 上次说到了图片的读取和写入到本地,这次说一下图片的格式相关。 位图和矢量图 photoshop处理出来的图片肯定叫做图片,那么coreDraw处理出来的图片是不是也叫图片。 之间就有区分,一种叫做位图,一种叫做矢量图 位图和矢…

STM32作业实现(四)光敏传感器

目录 STM32作业设计 STM32作业实现(一)串口通信 STM32作业实现(二)串口控制led STM32作业实现(三)串口控制有源蜂鸣器 STM32作业实现(四)光敏传感器 STM32作业实现(五)温湿度传感器dht11 STM32作业实现(六)闪存保存数据 STM32作业实现(七)OLED显示数据 STM32作业实现(八)触摸按…

曝光超1.5亿,迪丽热巴“抖音直播首秀”解锁德施曼智能锁科技革命

作为中国电商行业年中最大的消费狂欢节点,今年的618大促热闹依旧;各大品牌在今年极简的现货模式下展开了周期最长的品牌实力比拼。其中,高端智能锁领军品牌德施曼在618大促期间,携手代言人迪丽热巴,再次掀起智能锁消费…

【前端】Vuex笔记(超详细!!)

最近花了两周时间,完完全全的跟着Vuex官方的视频学完了Vuex并且详详细细的做了笔记,其中总结部分是我对于整个视频课程的总结,视频部分是跟着视频做的笔记,如果总结部分有不懂的话,直接去视频部分查找对应的笔记即可&a…

Codeforces Round 548 (Div. 2) C. Edgy Trees

Edgy Trees time limit per test: 2 second memory limit per test: 256 megabytes input: standard input output: standard output You are given a tree (a connected undirected graph without cycles) of n n n vertices. Each of the n − 1 n - 1 n−1 edges of the t…

计算机毕业设计 | SpringBoot招投标系统 任务发布网站(附源码)

1,绪论 在市场范围内,任务发布网站很受欢迎,有很多开发者以及其他领域的牛人,更倾向于选择工作时间、工作场景更自由的零工市场寻求零散单子来补贴家用。 如今市场上,任务发布网站鱼龙混杂,用户需要找一个…

【TCP协议中104解析】wireshark抓取流量包工具,群殴协议解析基础

Tcp ,104 ,wireshark工具进行解析 IEC104 是用于监控和诊断工业控制网络的一种标准,而 Wireshark则是一款常用的网络协议分析工具,可以用干解析TEC104 报文。本文将介绍如何使用 Wireshark解析 IEC104报文,以及解析过 程中的注意事项。 一、安…

STL-queue的使用及其模拟实现

在C标准库中,队列(queue)是一种容器适配器,它以先进先出的方式组织数据,其中从容器一端插入元素,另一端取出元素。 queue的使用 queue的构造函数 queue的成员函数 empty:检测队列是否为空size:返回队列中有…

7-14 字节序(Endianness)---PTA实验C++

一、题目描述 “内存寻址的最小单位是字节”——明白。 “每个字节有唯一的编号,称为地址”——明白。 “C中int通常为四个字节”——了解。 “int x 1;最低字节是1还是0?——纳尼? 事实上,这里有点小小分歧: 多字…

C++对C的增强

1、作用域运算符 ::解决归属问题(谁是谁的谁) 可以优先使用全局变量 2、命名空间 使用关键字namespace,控制标名称的作用域。 命名空间的本质:对符号常量、变量、函数、结构、枚举、类和对象等等进行封装 1、创建一个命名空间…

学习小记录——python函数的定义和调用

今日小好运,未来有好运。🎁💖🫔 分享个人学习的小小心意,一起来看看吧 函数的定义 函数通常来说就是带名字的代码块,用于完成具体的工作,需要使用的时候调用即可,这不仅提高代码的…

我的创作纪念日-砥砺前行

机缘 大家好,我是诊断协议那些事儿,又和大家见面了,记录一下创作日记,转眼间已经在CSDN平台创作三年了,最初仅仅是为了记录学习过程中的笔记,后来慢慢转为项目实践中的经验分享,当然更多的希望…