Nodejs - 异步I/O

异步I/O

利用单线程,远离多线程死锁,状态同步等问题,利用异步I/O, 让单线程原理阻塞,更好的使用cpu

在这里插入图片描述

异步I/O实现现状

  1. 阻塞IO
    操作系统内对于I/O只有两种方式: 阻塞和非阻塞。在调用阻塞I/O的时候,应用程序需要等待I/O完成之后才返回结构。
    阻塞I/O的特点是调用之后等到系统内核层面完成所有操作之后,调用才结束。阻塞i/o造成CPU等待I/O,浪费等待事件,CPU的处理能力不能被充分利用
    在这里插入图片描述

  2. 非阻塞I/O
    操作系统对计算机进行了抽象,将所有的输入输出设备抽象为文件,内核在进行文件I/O的操作的时候,通过文件操作符进行管理,而文件描述符类似于引用程序和系统内核之间的凭证,应用程序如果需要对I/O进行调用,需要调用文件描述符。非阻塞I/O获取数据,不带数据进行返回,如果需要获取数据,需要调用文件操作符进行读取。为了获取完整的数据,引用程序需要重复调用I/O操作来确认是否完成。
    在这里插入图片描述

    非阻塞I/O返回的后,CPU的时间片可以用来处理其他事务,

    • 轮询
      减少I/O状态判断的CPU损耗
      1. read 重复调用检查I/O的状态来完成数据的读取,在获得到最终的数据之前,cpu会一直耗用在等待上。
        在这里插入图片描述

      2. select 在read的基础上进行改进的一种方案,通过对文件描述符上的事件状态来判断。select轮询必须使用1024数组来存储状态。
        在这里插入图片描述

      3. poll 使用链表的方式避免数组长度限制,其次避免不需要的检查。当文件操作符较多的时候,性能还是十分低下的。
        在这里插入图片描述

      4. epoll linux下最高效率的I/O事件通知机制。进入轮询的时候,如果没有检查到的I/O事件。就会进行休眠,知道事件将它唤醒,利用事件通知,执行回调的方式,而不是遍历查询
        在这里插入图片描述

      5. kqueue 仅仅在FreeBSD系统下运行,类似于epoll

  3. 异步I/O
    Node在*nix平台下实现了libeio配合libev实现io部分。采用了线程池和阻塞I/O模拟异步。
    在window利用IOCP
    区别: node提供了libuv作为抽象封装层。是的所有的平台兼容性判断都有这一层来完成,保证上层的node和下层的自定义线程池之间独立。
    在node是单线程,这里的单线程仅仅是JavaScript执行在单线程
    在这里插入图片描述

Node的异步I/O

  1. 事件循环
    node自身的执行模型- 事件循环。
    在进程启动的时候,会创建一个while的循环,每执行一个循环体的过程称为tick,每个tick的过程就是查看是否有是事件待处理,如果有,就取出事件以及相关的回调函数。如果存在关联的回调函数。就执行。无的话,退出流程。
    

在这里插入图片描述

  1. 观察者
    每个事件循环中有一个或者多个观察者,判断是否有事件要处理就是向观察者询问是否有要处理的事件。
    node中,事件主要来源于网路请求,文件I/O, 这些事件对应的观察者都有文件I/O观察者,网络I/O观察者。
    事件循环是一个生产者/消费者模型。生产者: 异步io,网络请求。事件传递到观察者,事件循环从观察者那边取出事件循环。

  2. 请求对象

    fs.open = function(path, flags, mode, callback) {
    binding.open(pathModule._makeLong(path), stringToFlags(flags), mode, callback)
    }
    

    fs.open() 根据执行路径和参数打开一个文件,从而得到一个文件操作符,这是后续io操作的初始操作。
    在这里插入图片描述

    从JavaScript中调用node 的核心模块,核心模块中调用c++内建模块,内建模块通过libuv进行系统调用,这里的libuv作为封装层,有两个平台的实现,实际上是调用了uv_fs_open()的方法,在uv_fs_open()的调用过程中,创建了一个FSReqWrap请求对象,从JavaScript传入的参数和当前方法都被封装在这个请求对象中,最为关注的回调函数则被设置在这个对象的oncomplete_sym属性上。

    • 请求对象是异步io中的重要中间产物,所有的状态都保存在这个对象中,包括送入线程和io操作完毕之后的回调处理
  3. 执行回调
    组装好请求对象,送入io线程池等待执行, 实际上完成了异步io第一部分
    线程池中的io操作调用完毕之后,会将获取的对象存储在req-result属性上。
    在这里插入图片描述

    事件循环,观察者,请求对象,io线程池这四者共同构成了node异步io模型的四要素

非io的异步api

  • setTimeout() setInterval()
    分别用于单次和多次定时执行任务。 实现的原理和异步io比较相似,只是不需要io线程池的参与。
    调用setTimeout()和setInterval() 创建的迭代器会被插入到是定时器观察者内部的一个红黑树中,每次tick执行,会从该红黑树中迭代取出定时器对象,检查是否超过定时时间。如果超过就形成一个事件,回调函数会立即执行
    定时器的问题在于,并非精确的在容忍事件范围内,尽管事件循环十分快,但是如果某次循环占用的时候过多,下次循环的时候,也会超时很久。
    在这里插入图片描述

  • process.nextTick()

    process.nextTick = function(callback) {
       if(process._exiting) return 
       if(tickDepth >= process.maxTickDepth)
           maxTickWarn()
       var tock = { callback: callback } 
       if (process.domain) tock.domain = process.domain
       nextTickQueue.push(tock)
       if (nextTickQueue.length) {
           process._needTickCallback()
       }
    }
    
  • setImmediate()
    setImmediate()和process.nextTick()方法十分类似,都是将回调函数延迟执行

    process.nextTick(function() {
        console.log("延迟执行")
    })
    console.log("正常执行")
    // 正常执行 延迟执行
    
    setImmediate(function() {
        console.log('延迟执行')
    })
    console.log("正常执行")
    // 正常执行 延迟执行
    
    process.nextTick(function () {
        console.log('nextTick延迟执行')
    })
    setImmediate(function () {
        console.log('setImmediate延迟执行')
    })
    console.log('正常执行')
    // 正常执行
    // nextTick 延迟执行
    // setImmediate 延迟执行
    

    process.nextTick()中的回调函数执行的优先级要高于setImmediate() 时间循环对于观察者的检查是由先后顺序的,process.nextTick()属于idle观察者。setImmediate()属于check观察者,在每一次循环检查中,idle观察者先于io观察者,io观察者先于check观察者、
    process.nextTick() 的回调函数保存在一个数组中,setImmediate()的结果保存在链表中。process.nextTick()在每轮循环中会将数组中的回调函数全部执行完,setImmediate()在每轮循环中执行链表中的一个回调函数

    process.nextTick(function() {
        console.log('nextTick延迟执行1')
    })
    process.nextTick(function()) {
        console.log('nextTick延迟执行2')
    }
    setImmediate(function() {
        console.log('setImmediate延迟执行1')
        process.nextTick(function () {
            console.log('强势插入')
        })
    })
    setImmediate(function() {
        console.log('setImmediate延迟执行2')
    })
    console.log('正常执行')
    // 正常执行
    // nextTick延迟执行1
    // nextTick延迟执行2
    // setImmediate延迟执行1
    // 强势插入
    // setImmediate延迟执行2
    

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/563002.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

无损以太网的ROCE革命,队列的缓存空间优化分析

ROCE无损以太网,队列的缓存空间优化 多级缓存架构优化芯片性能:* 缓存空间细分为芯片级、端口级和队列级,实现精细管理。* 无损队列引入Headroom缓存空间,确保数据完整性。 在芯片层面: 静态缓存为端口提供保证的缓存空…

Tomcat弱口令及war包漏洞复现(保姆级教程)

1.环境搭建 靶机:Ubuntu 安装参考:安装Ubuntu详细教程_乌班图安装教程-CSDN博客 vulhub docker搭建tomcat漏洞环境 参考:vulhub docker靶场搭建-CSDN博客 工具:burpsuite 2.漏洞复现 2.1弱口令爆破 进入http://192.168.143…

分类神经网络1:VGGNet模型复现

目录 分类网络的常见形式 VGG网络架构 VGG网络部分实现代码 分类网络的常见形式 常见的分类网络通常由特征提取部分和分类部分组成。 特征提取部分实质就是各种神经网络,如VGG、ResNet、DenseNet、MobileNet等。其负责捕获数据的有用信息,一般是通过…

创新案例|Amazon.com 2023 年营销策略:电子商务零售巨头商业案例研究

2022 年最后一个季度,亚马逊报告净销售额超过 1,492 亿美元。这种季节性峰值是亚马逊季度报告的典型特征,但增长是不可否认的,因为这是该公司有史以来最高的季度。毫无疑问,这家电商零售巨头继续引领电商增长。本文将介绍我们今天…

Elasticsearch进阶篇(三):ik分词器的使用与项目应用

ik分词器的使用 一、下载并安装1.1 已有作者编译后的包文件1.2 只有源代码的版本1.3 安装ik分词插件 二、ik分词器的模式2.1 ik_smart演示2.2 ik_max_word演示2.3 standard演示 三、ik分词器在项目中的使用四、ik配置文件4.1 配置文件的说明4.2 自定义词库 五、参考链接 一、下…

mysql基础10——函数

数学函数 处理数值数据 取整函数 round(X,D) X表示要处理的数 D表示要保留的小数位数 处理的方式是四舍五入 round(X) 保留0位小数 金额要精确到分 说明保留两位小数 select round(salevalue,2) from demo.transactiondetails where transactionid1 and itemnum1; cei…

matplotlib从起点出发(15)_Tutorial_15_blitting

0 位图传输技术与快速渲染 Blitting,即位图传输、块传输技术是栅格图形化中的标准技术。在Matplotlib的上下文中,该技术可用于(大幅度)提高交互式图形的性能。例如,动画和小部件模块在内部使用位图传输。在这里&#…

记录一个hive中跑insert语句说没创建spark客户端的问题

【背景说明】 我目前搭建离线数仓,并将hive的执行引擎改成了Spark,在将ods层的数据装载到dim层,执行insert语句时报如下错误 【报错】 [42000][40000] Error while compiling statement: FAILED: SemanticException Failed to get a spark…

Rust序列化和反序列化

Rust 编写python 模块 必备库 docker 启动 nginx 服务 NGINX 反向代理配置

RAG技术从入门到精通

LLM之RAG技术从入门到精通 RAG技术介绍诞生背景定义 RAG与微调RAG流程架构RAG三种范式Naive RAGAdvanced RAG预检索过程嵌入后期检索过程RAG管道优化 Modular RAG RAG工作流程企业知识问答知识库RAG评估评价方法独立评估端到端评估 关键指标和能力 RAG优化RAG在企业知识库应用下…

WebSocket 快速入门 - springboo聊天功能

目录 一、概述 1、HTTP(超文本传输协议) 2、轮询和长轮询 3、WebSocket 二、WebSocket快速使用 1、基于Java注解实现WebSocket服务器端 2、JS前端测试 三、WebSocket进阶使用 1、如何获取当前用户信息 2、 后端聊天功能实现 一、概述 HTTP…

Navicat Premium 16最新版激活 mac/win

Navicat Premium 16 for Mac是一款专业的多连接数据库管理工具。它支持连接多种类型的数据库,包括MySQL、MongoDB、Oracle、SQLite、SQL Server、PostgreSQL等,可以同时连接多种数据库,帮助用户轻松地管理和迁移数据。 Navicat Premium 16 fo…

Wpf 使用 Prism 实战开发Day21

配置默认首页 当应用程序启动时&#xff0c;默认显示首页 一.实现思路&#xff0c;通过自定义接口来配置应用程序加载完成时&#xff0c;设置默认显示页 步骤1.创建自定义 IConfigureService 接口 namespace MyToDo.Common {/// <summary>/// 配置默认显示页接口/// <…

Golang那些违背直觉的编程陷阱

目录 知识点1&#xff1a;切片拷贝之后都是同一个元素 知识点2&#xff1a;方法集合决定接口实现&#xff0c;类型方法集合是接口方法集合的超集则认定为实现接口&#xff0c;否则未实现接口 切片拷贝之后都是同一个元素 package mainimport ("encoding/json"&quo…

springboot是什么?

可以应用于Web相关的应用开发。 选择合适的框架&#xff0c;去开发相关的功能&#xff0c;会有更高的效率。 为什么Spring Boot才是你该学的!学java找工作必会技能!在职程序员带你梳理JavaEE框架_哔哩哔哩_bilibili java工程师的必备技能 Spring是Java EE领域的企业级开发宽…

Kafka源码分析(四) - Server端-请求处理框架

系列文章目录 Kafka源码分析-目录 一. 总体结构 先给一张概览图&#xff1a; 服务端请求处理过程涉及到两个模块&#xff1a;kafka.network和kafka.server。 1.1 kafka.network 该包是kafka底层模块&#xff0c;提供了服务端NIO通信能力基础。 有4个核心类&#xff1a;…

华为海思校园招聘-芯片-数字 IC 方向 题目分享——第六套

华为海思校园招聘-芯片-数字 IC 方向 题目分享——第六套 (共9套&#xff0c;有答案和解析&#xff0c;答案非官方&#xff0c;未仔细校正&#xff0c;仅供参考&#xff09; 部分题目分享&#xff0c;完整版获取&#xff08;WX:didadidadidida313&#xff0c;加我备注&#x…

使用python socket搭建Client测试平台

目录 概述 1 背景 2 Client功能实现 2.1 何谓Client 2.2 代码功能介绍 2.3 代码实现 2.3.1 代码介绍 2.3.2 代码内容 3 测试 3.1 PC上创建Server 3.2 同一台PC上运行Client 3.2.1 建立连接 3.2.2 测试数据交互 3.3 Linux 环境下运行Client 3.3.1 建立连接 3.3.…

无限滚动分页加载与下拉刷新技术探析:原理深度解读与实战应用详述

滚动分页加载&#xff08;也称为无限滚动加载、滚动分页等&#xff09;是一种常见的Web和移动端应用界面设计模式&#xff0c;用于在用户滚动到底部时自动加载下一页内容&#xff0c;而无需点击传统的分页按钮。这种设计旨在提供更加流畅、连续的浏览体验&#xff0c;减少用户交…

Redis 如何实现分布式锁

课程地址 单机 Redis naive 版 加锁&#xff1a; SETNX ${lockName} ${value} # set if not exist如果不存在则插入成功&#xff0c;返回 1&#xff0c;加锁成功&#xff1b;否则返回 0&#xff0c;加锁失败 解锁&#xff1a; DEL ${lockName}问题1 2 个线程 A、B&#…