Linux——缓冲区与实现C库的fopen，fwrite，fclose

目录

一.缓冲区

1缓冲区的概念

2.缓冲区存在的意义

3.缓冲区刷新策略   

4.什么是刷新？

C语言的缓冲区在哪里？

​编辑

仿写C库里的fopen，fclose，fwrite。

mystdio.h

mystdio.c

main.c(向文件中写入20次msg)

一.缓冲区

1缓冲区的概念

缓冲区的本质就是一段内存

2.缓冲区存在的意义

提高使用者的效率

同时因为缓冲区的存在也提高了操作系统的效率

举例一个例子：
 

假如你在云南要给你北京的朋友寄东西。方法一：你可以亲自己去北京把东西交给他，方法二：把东西给快递站，让它帮你送给他。

这里虽然整个事件持续的事件基本一样，但是对于你来说方法二比方法一效率要高的多，因为你只需要把东西交给快递站，对于你来说就结束了，接下来就可以做其他事情了。而快递站，也会根据你的需求以及自身制定发送快递的策略，不会收到一个快递就发送。

这里：你就是正在执行的进程，快递站是缓冲区。朋友就是文件，快递发送策略：缓冲区刷新策略


3.缓冲区刷新策略   

     1，无缓冲（立即刷新）--fflush()

   2，行缓存（行刷新）--遇到换行就刷新

一般对于显示器文件，采用行刷新

   3，全缓冲（缓冲区满了，再刷新）

磁盘文件采用全缓冲

特殊情况：

1.强制刷新

2.进程退出时，一般要进行刷新缓冲区（属于强制刷新的一种特殊情况）

一个例子：（同一份代码不同结果）

#include <stdio.h>
#include <string.h>
#include <unistd.h>

int main()
{
    fprintf(stdout, "C: hello fprintf\n");
    printf("C: hello printf\n");
    fputs("C: hello fputs\n", stdout);
    const char *str = "system call: hello write\n";
    write(1, str, strlen(str));

    fork(); // 注意fork的位置！
    return 0;
}

可以看出，当重定向到log.txt文件时，除了系统函数write之外，都重复了两次。且write打印的内容在最前面

解释：

1.当我们直接向显示器打印时，显示器文件的刷新方式是行刷新！而且你的代码输出所有字符串都有‘\n’,fork之前，数据就全部被刷新，包括systemcall

2.重定向到log.txt，本质是向磁盘文件中写入（不是显示器！），我们系统对于数据的刷新方式有行刷新，变成了全缓冲！

3.全缓冲意味着缓冲区变大，实际写入的简单数据，不足以把缓冲区写满，fork执行的时候，数据依旧在缓冲区中。

4.我们目前的“缓冲区”，和操作系统是没有关系的 ，只能是语言本身有关，(用户缓冲区)

5.C/C++ 所提供的缓冲区，里面一定保存的是用户数据，属于当前进程在运行自己的数据

如果我们把数据交给操作系统，这个数据就属于操作系统，不属于自己（进程）。

6.当进程退出的时候一般要刷新缓冲区（修改了进程的数据），即使你的数据没有满足刷新条件。

总结：

因此在重定向后，由于变为全缓冲，C语言函数里要打印的东西就成为数据保存在C语言的缓冲区里，接着调用了fork函数创建了子进程，这时无论那个进程在退出前，都会刷新缓冲区（修改数据据，）向文件写入数据，接着就会发生写时拷贝，未退出的进程的数据中让然有之前缓冲区的数据，当这个进程退出是，还会刷新缓冲区，向文件写入数据。因此C语言函数的内容会打印两次。

write是系统调用函数，不使用C语言的缓冲区，直接写入操作系统，不属于进程，不发生写时拷贝！同时，这也是为什么write里的内容第一个打印到log.txt文件里。

4.什么是刷新？

这里我们用printf()函数举例。

在使用printf时，我们会把数据先弄到C语言的缓冲区，当出发刷新的条件时，就调用系统函数write,将缓冲区里的数据全部刷新到文件缓冲区里。而将C语言缓冲区里的数据弄到文件缓冲区里的的过程就是刷新。

为什么要采用刷新，而不是直接通过C语言函数，向文件缓冲区直接写入？

原因：采用刷新策略的效率比直接写入效率高。

文件缓冲区的数据如何刷新到文件上?

这个操作与我们无关，取决于操作系统，但是我们可以确定一点，文件缓冲区的刷新策略一定与语言缓冲区的刷新策略不同

C语言的缓冲区在哪里？

在任何情况下，我们输入输出的时候，都要有一个FILE，FILE是一个结构体，FILE里面除了包含fd(文件标识符)外，还有一段缓冲区。同时也是因此每打开一个文件，对应文件就会有个文件缓冲区，在我们对多个文件进行操作是，因为操作的缓冲区不同，是文件之间不会相互影响。

这里如果你想查看FILE结构体里有关缓冲区的内容，可以输入指令：

vim /usr/include/libio.h +246

结构体名是_IO_FILE与是C库对FILE使用typedef重命名了。

具体可通过指令：

vim /usr/include/stdio.h

打开文件后到第48行查看

仿写C库里的fopen，fclose，fwrite。

mystdio.h

#pragma once

#define SIZE 4096        //缓冲区的大小

//缓冲区刷新策略

#define FLUSH_NONE 1         //直接刷新
#define FLUSH_LINE (1<<1)    //行刷新
#define FLUSH_ALL  (1<<2)    //全缓冲


typedef struct _myFILE     //FILE结构体
{
    int fileno;         //文件标识符
    int flag;           //刷新策略
    char buffer[SIZE];  //语言缓冲区
    int end;            //缓冲区存储数据的大小
}myFILE;


extern myFILE *my_fopen(const char *path, const char *mode);   //仿写fopen

extern int my_fwrite(const char *s, int num, myFILE *stream);  //仿写fwrite

extern int my_fflush(myFILE *stream);                          //仿写fflush

extern int my_fclose(myFILE*stream);                           //仿写fclose



mystdio.c

#include "mystdio.h"
#include <string.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <errno.h>
#include <stdlib.h>
#include <unistd.h>

#define DFL_MODE 0666   //设置默认权限

myFILE *my_fopen(const char *path, const char *mode)
{
    int fd   = 0;   
    int flag = 0;


    //设置文件打开方式

    if(strcmp(mode, "r") == 0)
    {
        flag |= O_RDONLY;
    }
    else if(strcmp(mode, "w") == 0)
    {
        flag |= (O_CREAT | O_TRUNC | O_WRONLY);
    }
    else if(strcmp(mode, "a") == 0)
    {
        flag |= (O_CREAT | O_WRONLY | O_APPEND);
    }
    else{
        // Do Nothing
    }




    //文件不存在，创建文件并打开，并获取文件标识符与设置默认权限
    if(flag & O_CREAT)
    {
        fd = open(path, flag, DFL_MODE);
    }

    //文件存在，打开文件，获取文件标识符
    else
    {
        fd = open(path, flag);
    }

    //判断文件是否打开成功
    if(fd < 0)
    {
        errno = 2;
        return NULL;
    }

    

    //为FILE指针开辟空间
    myFILE *fp = (myFILE*)malloc(sizeof(myFILE));
    if(!fp) 
    {
        errno = 3;
        return NULL;
    }

    //对FILE内容初始化
    fp->flag = FLUSH_LINE;
    fp->end = 0;
    fp->fileno = fd;
    return fp;
}



int my_fwrite(const char *s, int num, myFILE *stream)  //仿写fwrite
{

    // 将数据写入C语言缓冲区
    memcpy(stream->buffer+stream->end, s, num);
    stream->end += num;


// 判断是满足刷新条件, 这里我默认'\n'只会出现在结尾，在"abcd\nefgh"这种情况下会有bug
    if((stream->flag & FLUSH_LINE) && stream->end > 0 && stream->buffer[stream->end-1] == '\n')
    {
        my_fflush(stream);
    }

    return num;
}


int my_fflush(myFILE *stream)//仿写fflush
{
    //当缓冲区不为空时，刷新缓冲区
    if(stream->end > 0)
    {
        write(stream->fileno, stream->buffer, stream->end);
        //fsync(stream->fileno);
        stream->end = 0;
    }

    return 0;
}


int my_fclose(myFILE*stream)   //仿写fclose
{
    my_fflush(stream);        //强制刷新
    return close(stream->fileno);
}

main.c(向文件中写入20次msg)

#include "mystdio.h"
#include <stdio.h>
#include <string.h>
#include <unistd.h>

int main()
{
    myFILE *fp = my_fopen("./log.txt", "w");
    if(fp == NULL)
    {
        perror("my_fopen");
        return 1;
    }
    int cnt = 20;
    const char *msg = "haha, this is my stdio lib";
    while(cnt--){
        my_fwrite(msg, strlen(msg), fp);
        sleep(1);
    }
    my_fclose(fp);
    return 0;
}

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/234168.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

protobuf安装教程v21.11

protobuf安装教程v21.11

Linux&#xff1a; 1.安装依赖库 下载ProtoBuf前⼀定要安装依赖库&#xff1a;autoconf automake libtool curl make g unzip如未安装&#xff0c;安装命令如下: Ubuntu用户&#xff1a; sudo apt-get install autoconf automake libtool curl make g unzip -y CentOS用户&…
阅读更多...
盘点251个Python源码Python爱好者不容错过

盘点251个Python源码Python爱好者不容错过

盘点251个Python源码Python爱好者不容错过 学习知识费力气&#xff0c;收集整理更不易。 知识付费甚欢喜&#xff0c;为咱码农谋福利。 项目名称 链接&#xff1a;https://pan.baidu.com/s/1PikCn61NfHXmEzQiny8kfw?pwd6666 提取码&#xff1a;6666 dailyfreshpython-Dj…
阅读更多...
MongoDB中的sort()排序方法、aggregate()聚合方法和索引

MongoDB中的sort()排序方法、aggregate()聚合方法和索引

本文主要介绍MongoDB中的sort()排序方法、aggregate()聚合方法和索引。 目录 MongoDB的sort()排序方法MongoDB的aggregate()聚合方法MongoDB的索引 MongoDB的sort()排序方法 在MongoDB中&#xff0c;sort()方法是用来对查询结果进行排序的。sort()方法可以用于在查询语句中对指…
阅读更多...
[NAND Flash] 1.1 闪存（NAND Flash) 学习指南

[NAND Flash] 1.1 闪存（NAND Flash) 学习指南

依公知及经验整理&#xff0c;原创保护&#xff0c;禁止转载。 专栏 《深入理解NAND Flash》 ​ 回首 漠然回首&#xff0c;从事存储芯片行业已多年&#xff0c;这些年宝贵的青春都献给了闪存。 我刚入行的时候&#xff0c;也是萌新一个&#xff0c;彷佛大学学的都没有和这相…
阅读更多...
docker安装部署

docker安装部署

1.在线安装Docker 安装Docker依赖库&#xff1a; yum install -y yum-utils device-mapper-persistent-data lvm2添加yum来源&#xff1a; yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo安装Docker&#xff1a; yum install doc…
阅读更多...
[香橙派]orange pi zero 3 烧录Ubuntu系统镜像——无需HDMI数据线安装

[香橙派]orange pi zero 3 烧录Ubuntu系统镜像——无需HDMI数据线安装

一、前言 本文我们将介绍如何使用orange pi zero 3 安装Ubuntu系统&#xff0c;本文相关步骤均参考自开发手册。 二、实施准备 根据开发手册中所提到的&#xff0c;我们应该拥有如下配件: 1.orange pi zero 3 开发板 2.TF 卡——最小 8GB 容量的 class10 级或以上的高速闪迪卡。…
阅读更多...
@德人合科技 | 数据透明加密防泄密系统\文件文档加密\设计图纸加密|源代码加密防泄密软件系统，——防止内部办公终端核心文件数据/资料外泄！

@德人合科技 | 数据透明加密防泄密系统\文件文档加密\设计图纸加密|源代码加密防泄密软件系统，——防止内部办公终端核心文件数据/资料外泄！

一款专业的数据防泄密管理系统&#xff0c;它采用了多种加密模式&#xff0c;包括透明加密、半透明加密和落地加密等&#xff0c;可以有效地保护企业的核心数据安全。 PC端访问地址&#xff1a; https://isite.baidu.com/site/wjz012xr/2eae091d-1b97-4276-90bc-6757c5dfedee …
阅读更多...
c++新经典模板与泛型编程：标准库容器中元素类型的萃取

c++新经典模板与泛型编程：标准库容器中元素类型的萃取

通过容器(数组)类型萃取元素类型 用GetEleType类模板进行常规实现 #include <iostream>#include <vector> #include <list>// 泛化版本 template<typename T> struct GetEleType;// 特化版本 template<typename T> struct GetEleType<std::v…
阅读更多...
【rabbitMQ】模拟work queue,实现单个队列绑定多个消费者

【rabbitMQ】模拟work queue,实现单个队列绑定多个消费者

上一篇&#xff1a; springboot整合rabbitMQ模拟简单收发消息 https://blog.csdn.net/m0_67930426/article/details/134904766?spm1001.2014.3001.5502 在这篇文章的基础上进行操作 基本思路&#xff1a; 1.在rabbitMQ控制台创建一个新的队列 2.在publisher服务中定义一个…
阅读更多...
基于JAVA+SpringBoot+Vue的前后端分离的医院信息智能化HIS系统

基于JAVA+SpringBoot+Vue的前后端分离的医院信息智能化HIS系统

✌全网粉丝20W,csdn特邀作者、博客专家、CSDN新星计划导师、java领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java技术领域和毕业项目实战✌ &#x1f345;文末获取项目下载方式&#x1f345; 一、项目背景介绍&#xff1a; 随着科技的不断发展&a…
阅读更多...
2023.12.3 关于 Spring Boot 拦截器 和 过滤器

2023.12.3 关于 Spring Boot 拦截器 和 过滤器

目录 引言 Spring 拦截器实现 实例理解 Spring 过滤器实现 实例理解 拦截器和过滤器的区别 出身不同 触发时机不同 底层实现不同 支持的项目类型不同 使用场景不同 引言 原生 Spring AOP 实现统一拦截有两个难点难点一&#xff1a;定义拦截规则表达式 难点二&#…
阅读更多...
四. 基于环视Camera的BEV感知算法-DETR3D

四. 基于环视Camera的BEV感知算法-DETR3D

目录 前言0. 简述1. 算法动机&开创性思路2. 主体结构3. 损失函数4. 性能对比总结下载链接参考 前言 自动驾驶之心推出的《国内首个BVE感知全栈系列学习教程》&#xff0c;链接。记录下个人学习笔记&#xff0c;仅供自己参考 本次课程我们来学习下课程第四章——基于环视Cam…
阅读更多...
arm平台编译so文件回顾

arm平台编译so文件回顾

提示&#xff1a;文章写完后&#xff0c;目录可以自动生成&#xff0c;如何生成可参考右边的帮助文档 文章目录 前言一、几个点二、回顾过程 1.上来就执行Makefile2.编译第三方开源库.a文件 2.1 build.sh脚本2.2 Makefile3.最终编译三、其它知识点总结 前言 提示&#xff1a;这…
阅读更多...
ES6中的继承，String类型方法的拓展

ES6中的继承，String类型方法的拓展

ES6中的继承&#xff1a; 主要是依赖extends关键字来实现继承&#xff0c;使用了extends实现继承不一定要constructor和super&#xff0c;因为没有的话会默认产生并调用它们。 在实现继承时&#xff0c;如果子类中有constructor函数&#xff0c;必须得在constructor中调用一下s…
阅读更多...
我对迁移学习的一点理解——领域适应（系列3）

我对迁移学习的一点理解——领域适应（系列3）

文章目录 1. 领域适应&#xff08;Domain Adaptation&#xff09;的基本概念2.领域适应&#xff08;Domain Adaptation&#xff09;的目标3.领域适应&#xff08;Domain Adaptation&#xff09;的实现方法4.领域适应&#xff08;Domain Adaptation&#xff09;的可以解决的问题…
阅读更多...
javaScript（六）：DOM操作

javaScript（六）：DOM操作

文章目录 1、DOM介绍2、DOM&#xff1a;获取Element对象3、DOM&#xff1a;事件监听3.1、事件介绍3.2、常见事件3.3、设置事件的两种方式3.4、事件案例 1、DOM介绍 概念 Document Object Model &#xff0c;文档对象模型 将标记语言的各个组成部分封装为对应的对象&#xff1a…
阅读更多...
leetcode 100.相同的树

leetcode 100.相同的树

涉及到递归&#xff0c;最好多画图理解&#xff0c;希望对你们有帮助 100.相同的树 题目 给你两棵二叉树的根节点 p 和 q &#xff0c;编写一个函数来检验这两棵树是否相同。 如果两个树在结构上相同&#xff0c;并且节点具有相同的值&#xff0c;则认为它们是相同的。 题目链接…
阅读更多...
一文掌握Ascend C孪生调试

一文掌握Ascend C孪生调试

1 What&#xff0c;什么是孪生调试 Ascend C提供孪生调试方法&#xff0c;即CPU域模拟NPU域的行为&#xff0c;相同的算子代码可以在CPU域调试精度&#xff0c;NPU域调试性能。孪生调试的整体方案如下&#xff1a;开发者通过调用Ascend C类库编写Ascend C算子kernel侧源码&am…
阅读更多...
项目记录：SpringBoot+Vue部署在阿里云服务器

项目记录：SpringBoot+Vue部署在阿里云服务器

目录 一、服务器配置 二、后端代码打包 三、前端项目打包 四、nginx配置 一、服务器配置 部署项目需要一个服务器&#xff0c;我们可以选择阿里云的云服务器ECS&#xff0c;在实例界面可以对服务器进行管理&#xff1a; 然后需要在mobaxterm配置jdk、mysql和nginx。注意配…
阅读更多...
排序算法之七：归并排序（递归）

排序算法之七：归并排序（递归）

基本思想 基本思想&#xff1a; 归并排序&#xff08;MERGE-SORT&#xff09;是建立在归并操作上的一种有效的排序算法,该算法是采用分治法&#xff08;Divide and Conquer&#xff09;的一个非常典型的应用。将已有序的子序列合并&#xff0c;得到完全有序的序列&#xff1…
阅读更多...
最新文章

Copyright @ 2022~2023