Linux文件缓冲区

在这里插入图片描述

文章目录

    • 1. 缓冲区现象
    • 2. 用户级和系统级缓冲区
    • 3. 缓冲区刷新
    • 4. 为什么要有缓冲区
    • 5. 文件打印的全缓冲
    • 6. 模拟实现C语言文件标准库

本章gitee代码仓库:重定向、模拟C语言文件标准库

1. 缓冲区现象

image-20231112144810498

我们这里分别调用了4个差不多的函数,但是结果是有一定差别的,这些其实就是因为有缓冲区的存在,导致了现象的不同。

2. 用户级和系统级缓冲区

C语言提供访问文件的接口,本质上都是对系统提供的接口进行封装。上面的func3函数,我们将一号文件描述符关闭之后,C接口的内容都没有在显示器上显示,而系统接口write不受影响,正常显示。

这个就能说明,C语言提供的缓冲区,并不是系统级别的缓冲区。例如printffprintffwrite这些库函数,都是先将数据写入到C语言提供的缓冲区当中,然后再到合适的时候,通过write将内容刷新带内核的缓冲区当中。

image-20231112153809575

所以这里close(1)将一号文件描述符关闭之后,再想让write写入,那就写不进去了,而在此之前write自己的内容,是直接写入系统缓冲区的,所以我们就能看到通过系统调用write写的内容不受影响,而C库函数的内容全部都没有被刷新出来。

3. 缓冲区刷新

缓冲区刷新分为三种:

  1. 无缓冲:直接刷新

  2. 行缓冲:遇到换行符(\n)刷新

    一般向显示器打印采用行刷新

  3. 全缓冲:缓冲区满了之后再刷新

    向文件写入一般采用全缓冲

上面的func4,因为我们字符串后面都跟上了\n,采用的行刷新,和func3不一样,遇到\n就刷新缓冲区,所以内容能够全部刷新出来。

当然,在进程退出的时候,也会再刷新一次缓冲区

4. 为什么要有缓冲区

我们现在有很多快递驿站,这些驿站就可以理解为缓冲区,有了驿站的存在,我们寄快递的时候,直接将快递放到驿站,填好地址信息,我们就可以走了,就不需要我们自己亲自去将这个东西给对方;而拿快递的时候也是,有了驿站的存在,我们可以选择在自己有空的时候去拿,而不是说快递一到,我们就得立马去,这样就能极大的提高我们的效率。

缓冲区也是如此,我们的库函数将内容交给我们的缓冲区后,然后再由缓冲区将内容在合适的时候,调用系统接口,把内容刷新到系统。这样就能够提高用户的效率,让C语言函数的接口更快。

fprintfprintfscanf这些,都是叫格式化输入输出接口,我们向显示器打印整数1024,在我们看来是一个整数,其实本质上是字符。先将我们的内容作为一个整体,格式化刷新到C的缓冲区,然后统一刷到内核当中。

image-20231112161619783

所以,有缓冲区的存在,也能更好地配合我们的格式化输入输出。

在C语言的文件操作里面,是绕不开这个struct FILE结构体的,所以里面也封装了缓冲区字段。

例如我们在C语言当中一次性打开了5个文件,那么就会有5个对应的缓冲区。

这个FILE是语言层面的,语言层面都是属于用户的,所以这个缓冲区是属于用户层的

5. 文件打印的全缓冲

有了这些知识,我们再来看上面的func2,我们在程序退出之前fork创建子进程,在显示器上输出的是正常的,但是如果我们将内容重定向到文件当中,我们发现C库函数的接口都输出了2次。

这是因为向文件打印时,刷新方案变成了全缓冲

当变为全缓冲之后,遇到\n就不再刷新。而这里fork创建子进程,子进程会将父进程的代码和数据拷贝一份,当然这里缓冲区的数据也会拷贝。因为是全缓冲,这里的缓冲区里面是有数据的。

我们先来验证一下这个,不创建子进程,向文件打印:

void func2()
{
  const char *fstr="hello fwrite\n";
  const char *str="hello write\n";
  printf("hello\n");
  sleep(1);
  fprintf(stdout,"hello fpf\n");
  sleep(1);
  fwrite(fstr,strlen(fstr),1,stdout);
  sleep(1);
  write(1,str,strlen(str));
  sleep(3);
  //fork();
}

GIF 2023-11-12 16-48-24

可以看到,这里向文件打印,虽然加了\n但并没有刷新,而是采用的全缓冲,等进程结束之后,全部刷新了。

所以这里拷贝的缓冲区进行写时拷贝,父进程退出刷新一次,子进程退出刷新一次,所以我们就能看到C接口的信息会被刷新2次。而我们输出到显示的时候,因为是行缓冲,每次直接刷新了,到子进程的时候,缓冲区里面没有数据了,所以就输出一次。

6. 模拟实现C语言文件标准库

简易实现:

#include"Mystdio.h"
#include<sys/types.h>
#include<sys/stat.h>
#include<fcntl.h>
#include<unistd.h>
#include<stdlib.h>
#include<string.h>
#include<assert.h>

#define FILE_MODE 0666

_FILE * _fopen(const char*filename,const char*flag)
{
  assert(filename);
  assert(flag);
  int f = 0;
  int fd = -1;
  if(strcmp(flag,"w") == 0)
  {
    f = (O_CREAT|O_WRONLY|O_TRUNC);
    fd = open(filename,f,FILE_MODE);
  }
  else if(strcmp(flag,"a") == 0)
  {
    f = (O_CREAT|O_WRONLY|O_APPEND);  
    fd = open(filename,f,FILE_MODE);
  }
  else if(strcmp(flag,"r") == 0)
  {
    f = O_RDONLY;
    fd = open(filename,f);
  }
  else
    return NULL;
 
  if(fd == -1)  return NULL;
  _FILE*fp = (_FILE*)malloc(sizeof(_FILE));
  fp->fileon = fd;
  fp->flag = FLUSH_ALL;  
  fp->out_pos = 0;  //初始缓冲区没有内容
  return fp;
}
int _fwrite(_FILE*fp,const char*s,int len)
{
  memcpy(&fp->outbuffer[fp->out_pos],s,len);
  fp->out_pos+=len;
  if(fp->flag & FLUSH_NOW)
  {
    write(fp->fileon,fp->outbuffer,fp->out_pos);
    fp->out_pos = 0;
  }
  else if(fp->flag&FLUSH_LINE)
  {
   if(fp->outbuffer[fp->out_pos-1] == '\n')
   {
     write(fp->fileon,fp->outbuffer,fp->out_pos);
     fp->out_pos = 0;
   }
  }
  else if(fp->flag&FLUSH_ALL)
  {
    if(fp->out_pos == SIZE)
    {
      write(fp->fileon,fp->outbuffer,fp->out_pos);
      fp->out_pos = 0;
    } 
  }
  return len;
}

void _fflush(_FILE*fp)
{
  if(fp->out_pos>0)
  {
    write(fp->fileon,fp->outbuffer,fp->out_pos);
    fp->out_pos = 0;
  }
}

void _fclose(_FILE*fp)
{
  if(fp == NULL)  return;
  _fflush(fp);
  close(fp->fileon);
  free(fp);
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/136341.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

【云备份项目两万字总结】服务端篇 -----附源码

项目总结 整体回顾逐步实现utill.hppconfig.hppdata.hpphot.hppservice.hpp 代码 整体回顾 服务端的目标是&#xff1a; 对客户端的请求进行处理管理客户端上传的文件 于客户端进行数据交换&#xff0c;我们需要引入网络&#xff0c;所以我们引入第三方库----httplib.h库&am…

如何在 Python 中执行 MySQL 结果限制和分页查询

Python MySQL 限制结果 限制结果数量 示例 1: 获取您自己的 Python 服务器 选择 “customers” 表中的前 5 条记录&#xff1a; import mysql.connectormydb mysql.connector.connect(host"localhost",user"您的用户名",password"您的密码"…

xml schema中的sequence的含义

https://www.w3.org/TR/xmlschema-1/#element-sequence xml schema中的sequence的含义&#xff1a;包含的元素必须按规定的顺序出现。通过属性maxOccurs和minOccurs可以定义最多、最少出现的次数。最多可以定义不限制次数&#xff0c;最少可以定义0次。默认是最少出现1次&…

Python基础入门例程54-NP54 被5整除的数字(循环语句)

最近的博文&#xff1a; Python基础入门例程53-NP53 前10个偶数(循环语句)-CSDN博客 Python基础入门例程52-NP52 累加数与平均值(循环语句)-CSDN博客 Python基础入门例程51-NP51 列表的最大与最小(循环语句)-CSDN博客 目录 最近的博文&#xff1a; 描述 输入描述&#xf…

Spring面试题:(六)Spring注解开发原理

ioc过程 发现只要将bean注册到BeanDefinitionMap中就可以创建bean对象 如何将xml配置的bean注册到BeanDefinitionMap 通过注解注册的bean过程一样 注册bean的接口&#xff1a;BeanDefinitionRegistryPostProcessor 开启组件扫描的两种方式&#xff1a;xml和注解 xml方式…

c++类对象内存模型(一)

C对象模型可以概括为以下2部分&#xff1a; 1. 语言中直接支持面向对象程序设计的部分&#xff0c;主要涉及如构造函数、析构函数、虚函数、继承&#xff08;单继承、多继承、虚继承&#xff09;、多态等等。 2. 对于各种支持的底层实现机制。在c语言中&#xff0c;“数据”和…

PySide/PYQT如何用Qt Designer和代码来设置文字属性,如何设置文字颜色?

文章目录 📖 介绍 📖🏡 环境 🏡📒 实现方法 📒📝 Qt Designer设置📝 代码📖 介绍 📖 本人介绍如何使用Qt Designer/代码来设置字体属性(包含字体颜色) 🏡 环境 🏡 本文使用Pyside6来进行演示📒 实现方法 📒 📝 Qt Designer设置 首先打开Qt De…

VUE Slot

在某些场景中&#xff0c;我们可能想要为子组件传递一些模板片段&#xff0c;让子组件在它们的组件中渲染这些片段. <template><h3>ComponentA</h3><ComponentB><h3>插槽传递视图内容</h3></ComponentB> </template> <scr…

第6 章 布局管理及多窗口技术

6.1 控件布局技术 所谓GUI界面&#xff0c;归根结底&#xff0c;就是一堆可视化控件的叠加。创建一个窗口&#xff0c;把按钮放上面&#xff0c;把图标放上面&#xff0c;这样就成了一个界面。在放置时&#xff0c;控件的位置尤为重要。我们必须指定控件放在哪里&#xff0c;以…

JDK1.8 新特性(一)【默认方法、静态方法和Lambda表达式】

前言 今天学习Java8 新特性&#xff0c;主要是之前在学习 Scala、JavaFX 中遇到一些 Lambda 表达式&#xff0c;感觉 lambda 表达式确实很简洁&#xff0c;很有必要学一学。 目录 前言 1、接口的默认方法与静态方法 编写接口 编写接口的实现类 测试 2、Lambda表达式&am…

xsschallenge通关攻略详解

xsschallenge通过攻略 文章目录 xsschallenge通过攻略第一关第二关第三关第四关第五关第六关第七关第八关第九关第十关第十一关第十二关第十三关 简述 xsschallenge挑战攻略 ps: 终极测试代码 <sCr<ScRiPt>IPT>OonN"\/(hrHRefEF)</sCr</ScRiPt>IPT&g…

【Go入门】面向对象

【Go入门】面向对象 前面两章我们介绍了函数和struct&#xff0c;那你是否想过函数当作struct的字段一样来处理呢&#xff1f;今天我们就讲解一下函数的另一种形态&#xff0c;带有接收者的函数&#xff0c;我们称为method method 现在假设有这么一个场景&#xff0c;你定义…

2.4 - 网络协议 - TCP协议工作原理,报文格式,抓包实战,UDP报文,UDP检错原理

「作者主页」&#xff1a;士别三日wyx 「作者简介」&#xff1a;CSDN top100、阿里云博客专家、华为云享专家、网络安全领域优质创作者 「推荐专栏」&#xff1a;对网络安全感兴趣的小伙伴可以关注专栏《网络安全入门到精通》 TCP协议 1、TCP协议工作原理2、TCP协议报文格式3、…

Accelerate 0.24.0文档 一:极速入门

文章目录 一、概述1.1 PyTorch DDP1.2 Accelerate 分布式训练简介1.2.1 实例化Accelerator类1.2.2 将所有训练相关 PyTorch 对象传递给 prepare()方法1.2.3 启用 accelerator.backward(loss) 1.3 Accelerate 分布式评估1.4 accelerate launch 二、Accelerate 进阶2.1 notebook_…

Home Assistant使用ios主题更换背景

Home Assistant使用ios主题、更换背景 lovelace-ios-dark-mode-theme 默认前置情况&#xff0c;1、已安转HACS插件2、搜索安装 IOS Dark Mode Theme1&#xff09;第一、二步应该很容易实现&#xff0c;configuration.yaml文件很容易被找到2&#xff09;而本人在进行第三步操作时…

时间序列预测实战(十四)Transformer模型实现长期预测并可视化结果(附代码+数据集+原理介绍)

论文地址->Transformer官方论文地址 官方代码地址->暂时还没有找到有官方的Transformer用于时间序列预测的代码地址 个人修改地址-> Transformer模型下载地址CSDN免费 一、本文介绍 这篇文章给大家带来是Transformer在时间序列预测上的应用&#xff0c;这种模型最…

【数据结构】拓扑序列求法

概念不多说了&#xff0c;有疑问的搜一下&#xff0c;这里直接放求法&#xff1a; 找到入度为0的节点输出并删除该节点&#xff0c;并删除与该点链接的边重复第一步 例子 输出a&#xff0c;删除a输出b&#xff0c;删除b输出c&#xff0c;删除c 最终结果为abcdef 注意 拓扑排…

【python海洋专题四十五】海洋研究区域示意图

【python海洋专题四十五】海洋研究区域示意图 【python海洋专题四十五】海洋研究区域示意图 结果展示&#xff1a; 图片 往期推荐 图片 【python海洋专题一】查看数据nc文件的属性并输出属性到txt文件 【python海洋专题二】读取水深nc文件并水深地形图 【python海洋专…

【蓝桥杯选拔赛真题66】Scratch画图机器人 少儿编程scratch图形化编程 蓝桥杯创意编程选拔赛真题解析

目录 scratch画图机器人 一、题目要求 编程实现 二、案例分析 1、角色分析

OpenGL_Learn09(摄像机)

1. 摄像机环绕观察 texture两个文件以及shader就是之前的版本 #include <glad/glad.h> #include <GLFW/glfw3.h>#include <iostream> #include "stb_image.h" #include <cmath> #include "shader.h"#include <glm/glm.hpp>…