Linux——缓冲区与实现C库的fopen,fwrite,fclose

2023-12-10 18:30

本文主要是介绍Linux——缓冲区与实现C库的fopen,fwrite,fclose,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

目录

一.缓冲区

1缓冲区的概念

2.缓冲区存在的意义

3.缓冲区刷新策略   

4.什么是刷新?

C语言的缓冲区在哪里?

​编辑

仿写C库里的fopen,fclose,fwrite。

mystdio.h

mystdio.c

main.c(向文件中写入20次msg)


一.缓冲区

1缓冲区的概念

缓冲区的本质就是一段内存

2.缓冲区存在的意义

提高使用者的效率

同时因为缓冲区的存在也提高了操作系统的效率

举例一个例子:
 

假如你在云南要给你北京的朋友寄东西。方法一:你可以亲自己去北京把东西交给他,方法二:把东西给快递站,让它帮你送给他。

这里虽然整个事件持续的事件基本一样,但是对于你来说方法二比方法一效率要高的多,因为你只需要把东西交给快递站,对于你来说就结束了,接下来就可以做其他事情了。而快递站,也会根据你的需求以及自身制定发送快递的策略,不会收到一个快递就发送。

这里:你就是正在执行的进程,快递站是缓冲区。朋友就是文件,快递发送策略:缓冲区刷新策略


3.缓冲区刷新策略   

     1,无缓冲(立即刷新)--fflush()

   2,行缓存(行刷新)--遇到换行就刷新

一般对于显示器文件,采用行刷新

   3,全缓冲(缓冲区满了,再刷新)

磁盘文件采用全缓冲

特殊情况:

1.强制刷新

2.进程退出时,一般要进行刷新缓冲区(属于强制刷新的一种特殊情况)

一个例子:(同一份代码不同结果)

#include <stdio.h>
#include <string.h>
#include <unistd.h>int main()
{fprintf(stdout, "C: hello fprintf\n");printf("C: hello printf\n");fputs("C: hello fputs\n", stdout);const char *str = "system call: hello write\n";write(1, str, strlen(str));fork(); // 注意fork的位置!return 0;
}

可以看出,当重定向到log.txt文件时,除了系统函数write之外,都重复了两次。且write打印的内容在最前面

解释:

1.当我们直接向显示器打印时,显示器文件的刷新方式是行刷新!而且你的代码输出所有字符串都有‘\n’,fork之前,数据就全部被刷新,包括systemcall

2.重定向到log.txt,本质是向磁盘文件中写入(不是显示器!),我们系统对于数据的刷新方式有行刷新,变成了全缓冲!

3.全缓冲意味着缓冲区变大,实际写入的简单数据,不足以把缓冲区写满,fork执行的时候,数据依旧在缓冲区中。

4.我们目前的“缓冲区”,和操作系统是没有关系的 ,只能是语言本身有关,(用户缓冲区)

5.C/C++ 所提供的缓冲区,里面一定保存的是用户数据,属于当前进程在运行自己的数据

如果我们把数据交给操作系统,这个数据就属于操作系统,不属于自己(进程)。

6.当进程退出的时候一般要刷新缓冲区(修改了进程的数据),即使你的数据没有满足刷新条件。

总结:

因此在重定向后,由于变为全缓冲,C语言函数里要打印的东西就成为数据保存在C语言的缓冲区里,接着调用了fork函数创建了子进程,这时无论那个进程在退出前,都会刷新缓冲区(修改数据据,)向文件写入数据,接着就会发生写时拷贝,未退出的进程的数据中让然有之前缓冲区的数据,当这个进程退出是,还会刷新缓冲区,向文件写入数据。因此C语言函数的内容会打印两次。

write是系统调用函数,不使用C语言的缓冲区,直接写入操作系统,不属于进程,不发生写时拷贝!同时,这也是为什么write里的内容第一个打印到log.txt文件里。

4.什么是刷新?

这里我们用printf()函数举例。

在使用printf时,我们会把数据先弄到C语言的缓冲区,当出发刷新的条件时,就调用系统函数write,将缓冲区里的数据全部刷新到文件缓冲区里。而将C语言缓冲区里的数据弄到文件缓冲区里的的过程就是刷新。

为什么要采用刷新,而不是直接通过C语言函数,向文件缓冲区直接写入?

原因:采用刷新策略的效率比直接写入效率高。

文件缓冲区的数据如何刷新到文件上?

这个操作与我们无关,取决于操作系统,但是我们可以确定一点,文件缓冲区的刷新策略一定与语言缓冲区的刷新策略不同

C语言的缓冲区在哪里?

在任何情况下,我们输入输出的时候,都要有一个FILE,FILE是一个结构体,FILE里面除了包含fd(文件标识符)外,还有一段缓冲区。同时也是因此每打开一个文件,对应文件就会有个文件缓冲区,在我们对多个文件进行操作是,因为操作的缓冲区不同,是文件之间不会相互影响。

这里如果你想查看FILE结构体里有关缓冲区的内容,可以输入指令:

vim /usr/include/libio.h +246

结构体名是_IO_FILE与是C库对FILE使用typedef重命名了。

具体可通过指令:

vim /usr/include/stdio.h

打开文件后到第48行查看

仿写C库里的fopen,fclose,fwrite。

mystdio.h

#pragma once#define SIZE 4096        //缓冲区的大小//缓冲区刷新策略#define FLUSH_NONE 1         //直接刷新
#define FLUSH_LINE (1<<1)    //行刷新
#define FLUSH_ALL  (1<<2)    //全缓冲typedef struct _myFILE     //FILE结构体
{int fileno;         //文件标识符int flag;           //刷新策略char buffer[SIZE];  //语言缓冲区int end;            //缓冲区存储数据的大小
}myFILE;extern myFILE *my_fopen(const char *path, const char *mode);   //仿写fopenextern int my_fwrite(const char *s, int num, myFILE *stream);  //仿写fwriteextern int my_fflush(myFILE *stream);                          //仿写fflushextern int my_fclose(myFILE*stream);                           //仿写fclose



mystdio.c

#include "mystdio.h"
#include <string.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <errno.h>
#include <stdlib.h>
#include <unistd.h>#define DFL_MODE 0666   //设置默认权限myFILE *my_fopen(const char *path, const char *mode)
{int fd   = 0;   int flag = 0;//设置文件打开方式if(strcmp(mode, "r") == 0){flag |= O_RDONLY;}else if(strcmp(mode, "w") == 0){flag |= (O_CREAT | O_TRUNC | O_WRONLY);}else if(strcmp(mode, "a") == 0){flag |= (O_CREAT | O_WRONLY | O_APPEND);}else{// Do Nothing}//文件不存在,创建文件并打开,并获取文件标识符与设置默认权限if(flag & O_CREAT){fd = open(path, flag, DFL_MODE);}//文件存在,打开文件,获取文件标识符else{fd = open(path, flag);}//判断文件是否打开成功if(fd < 0){errno = 2;return NULL;}//为FILE指针开辟空间myFILE *fp = (myFILE*)malloc(sizeof(myFILE));if(!fp) {errno = 3;return NULL;}//对FILE内容初始化fp->flag = FLUSH_LINE;fp->end = 0;fp->fileno = fd;return fp;
}int my_fwrite(const char *s, int num, myFILE *stream)  //仿写fwrite
{// 将数据写入C语言缓冲区memcpy(stream->buffer+stream->end, s, num);stream->end += num;// 判断是满足刷新条件, 这里我默认'\n'只会出现在结尾,在"abcd\nefgh"这种情况下会有bugif((stream->flag & FLUSH_LINE) && stream->end > 0 && stream->buffer[stream->end-1] == '\n'){my_fflush(stream);}return num;
}int my_fflush(myFILE *stream)//仿写fflush
{//当缓冲区不为空时,刷新缓冲区if(stream->end > 0){write(stream->fileno, stream->buffer, stream->end);//fsync(stream->fileno);stream->end = 0;}return 0;
}int my_fclose(myFILE*stream)   //仿写fclose
{my_fflush(stream);        //强制刷新return close(stream->fileno);
}

main.c(向文件中写入20次msg)

#include "mystdio.h"
#include <stdio.h>
#include <string.h>
#include <unistd.h>int main()
{myFILE *fp = my_fopen("./log.txt", "w");if(fp == NULL){perror("my_fopen");return 1;}int cnt = 20;const char *msg = "haha, this is my stdio lib";while(cnt--){my_fwrite(msg, strlen(msg), fp);sleep(1);}my_fclose(fp);return 0;
}

这篇关于Linux——缓冲区与实现C库的fopen,fwrite,fclose的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/477951

相关文章

C++中unordered_set哈希集合的实现

《C++中unordered_set哈希集合的实现》std::unordered_set是C++标准库中的无序关联容器,基于哈希表实现,具有元素唯一性和无序性特点,本文就来详细的介绍一下unorder... 目录一、概述二、头文件与命名空间三、常用方法与示例1. 构造与析构2. 迭代器与遍历3. 容量相关4

Linux join命令的使用及说明

《Linuxjoin命令的使用及说明》`join`命令用于在Linux中按字段将两个文件进行连接,类似于SQL的JOIN,它需要两个文件按用于匹配的字段排序,并且第一个文件的换行符必须是LF,`jo... 目录一. 基本语法二. 数据准备三. 指定文件的连接key四.-a输出指定文件的所有行五.-o指定输出

Linux jq命令的使用解读

《Linuxjq命令的使用解读》jq是一个强大的命令行工具,用于处理JSON数据,它可以用来查看、过滤、修改、格式化JSON数据,通过使用各种选项和过滤器,可以实现复杂的JSON处理任务... 目录一. 简介二. 选项2.1.2.2-c2.3-r2.4-R三. 字段提取3.1 普通字段3.2 数组字段四.

C++中悬垂引用(Dangling Reference) 的实现

《C++中悬垂引用(DanglingReference)的实现》C++中的悬垂引用指引用绑定的对象被销毁后引用仍存在的情况,会导致访问无效内存,下面就来详细的介绍一下产生的原因以及如何避免,感兴趣... 目录悬垂引用的产生原因1. 引用绑定到局部变量,变量超出作用域后销毁2. 引用绑定到动态分配的对象,对象

Linux kill正在执行的后台任务 kill进程组使用详解

《Linuxkill正在执行的后台任务kill进程组使用详解》文章介绍了两个脚本的功能和区别,以及执行这些脚本时遇到的进程管理问题,通过查看进程树、使用`kill`命令和`lsof`命令,分析了子... 目录零. 用到的命令一. 待执行的脚本二. 执行含子进程的脚本,并kill2.1 进程查看2.2 遇到的

SpringBoot基于注解实现数据库字段回填的完整方案

《SpringBoot基于注解实现数据库字段回填的完整方案》这篇文章主要为大家详细介绍了SpringBoot如何基于注解实现数据库字段回填的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以了解... 目录数据库表pom.XMLRelationFieldRelationFieldMapping基础的一些代

Java HashMap的底层实现原理深度解析

《JavaHashMap的底层实现原理深度解析》HashMap基于数组+链表+红黑树结构,通过哈希算法和扩容机制优化性能,负载因子与树化阈值平衡效率,是Java开发必备的高效数据结构,本文给大家介绍... 目录一、概述:HashMap的宏观结构二、核心数据结构解析1. 数组(桶数组)2. 链表节点(Node

Java AOP面向切面编程的概念和实现方式

《JavaAOP面向切面编程的概念和实现方式》AOP是面向切面编程,通过动态代理将横切关注点(如日志、事务)与核心业务逻辑分离,提升代码复用性和可维护性,本文给大家介绍JavaAOP面向切面编程的概... 目录一、AOP 是什么?二、AOP 的核心概念与实现方式核心概念实现方式三、Spring AOP 的关

Python实现字典转字符串的五种方法

《Python实现字典转字符串的五种方法》本文介绍了在Python中如何将字典数据结构转换为字符串格式的多种方法,首先可以通过内置的str()函数进行简单转换;其次利用ison.dumps()函数能够... 目录1、使用json模块的dumps方法:2、使用str方法:3、使用循环和字符串拼接:4、使用字符

Linux云服务器手动配置DNS的方法步骤

《Linux云服务器手动配置DNS的方法步骤》在Linux云服务器上手动配置DNS(域名系统)是确保服务器能够正常解析域名的重要步骤,以下是详细的配置方法,包括系统文件的修改和常见问题的解决方案,需要... 目录1. 为什么需要手动配置 DNS?2. 手动配置 DNS 的方法方法 1:修改 /etc/res