【Linux基础IO篇】用户缓冲区、文件系统、以及软硬链接

news2024/11/24 12:46:05

【Linux基础IO篇】用户缓冲区、文件系统、以及软硬链接

目录

  • 【Linux基础IO篇】用户缓冲区、文件系统、以及软硬链接
      • 深入理解用户缓冲区
        • 缓冲区刷新问题
        • 缓冲区存在的意义
      • File
        • 模拟实现C语言中文件标准库
      • 文件系统
        • 认识磁盘
        • 对目录的理解
      • 软硬链接
        • 软硬链接的删除
        • 文件的三个时间

作者：爱写代码的刚子

时间：2023.11.5

前言：本篇博客将介绍缓冲区、磁盘的构成、分区，以及文件系统中的结构、软硬链接

深入理解用户缓冲区

观察几个现象：

正常现象一：

在这里插入图片描述

现象二：

在这里插入图片描述

现象三：

在这里插入图片描述

图示：
在这里插入图片描述

解释现象：

  1. 对于现象二：C语言文件操作函数中的字符串不带有’\n’，即数据还停留在C语言的缓冲区中，并未刷新和调用write()函数，将数据刷新到内核系统文件的缓冲区中，而write()函数由于是系统调用函数，能正常执行，但是由于close()函数将显示器文件关闭了，即使进程结束也不能将数据从缓冲区刷新到显示器中。(如果将close函数屏蔽，将会将C语言缓冲区中的数据刷新到显示器)

  2. 对于现象三：(1)在程序未进行重定向之前，默认是将数据写入显示器中，当遇到’\n’时，将数据从C语言的缓冲区中刷新到内核文件系统的缓冲区，fork()并不影响原本程序的运行。(2)在程序进行重定向之后，数据从向显示器写入变为了向文件中写入，缓冲区从行缓冲变为了全缓冲，所以此时的’\n’并不起作用，所以数据依然存储在C语言的缓冲区中，fork()函数创建子进程时子进程会将父进程的C语言缓冲区进行拷贝，当父子进程结束后将缓冲区里面的内容全部刷新，输出到显示器中。

  • 显示器的文件的刷新方案是行刷新，所以在printf执行完就会在遇到’\n’的时候会立即进行刷新，用户刷新的本质就是将数据通过1+write写入到内核中。（目前我们认为，只要将数据刷新到了内核，数据就可以到硬件了）。
缓冲区刷新问题
  1. 无缓冲 ——直接刷新
  2. 行缓冲——不刷新，碰到’\n’刷新（显示器）
  3. 全缓冲——缓冲区满了才刷新（普通文件的写入）
  4. 进程退出的时候也会刷新缓冲区
缓冲区存在的意义
  1. 解决效率问题
  2. 配合格式化(printf中需要将%d等符号进行替换)

File

FILE里面含有对应打开文件等缓冲区字段和维护信息，同时FILE对象属于用户，这个缓冲区属于用户级缓冲区（语言属于用户层）

模拟实现C语言中文件标准库
  • Mystdio.h文件：
#ifndef __MYSTDIO_H__
#define __MYSTDIO_H__
//open头文件
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
//
#include <unistd.h>
//
#include <string.h>
#include <stdlib.h>

#define FILE_MODE 0666
#define SIZE 1024

#define FLUSH_NOW 1//0001
#define FLUSH_LINE 2//0010
#define FLUSH_ALL 4//0100

typedef struct IO_FILE{
    int fileno;
    int flag;
    char inbuffer[SIZE];
    int in_pos;
    char outbuffer[SIZE];
    int out_pos;//缓冲区的有效字符和无效字符分界
}_FILE;

_FILE* _fopen(const char* filename,const char* flag);
int _fwrite(_FILE *fp,const char*s,int len);
void _fclose(_FILE *fp);

#endif
  • Mystdio.c文件：
#include "Mystdio.h"

_FILE* _fopen(const char* filename,const char* flag)
{
    int f=0;
    int fd=-1;
    if(strcmp(flag,"w")==0)
    {
        f=O_CREAT|O_WRONLY|O_TRUNC;
        fd= open(filename,f,FILE_MODE);
    }
    else if(strcmp(flag,"r")==0)
    {
        f=O_CREAT|O_RDONLY|O_TRUNC;
        fd= open(filename,f,FILE_MODE);
    }
    else if(strcmp(flag,"a")==0)
    {
        f=O_APPEND;
        fd= open(filename,f);
    }
    else
    {
        return NULL;
    }
    
    if(fd==-1) return NULL;
    //创建文件结构对象
    _FILE* fp=(_FILE*)malloc(sizeof(_FILE));
    if(fp==NULL)return  NULL;

    fp->fileno = fd;
    fp->flag= FLUSH_LINE;
    fp->out_pos=0;


    return fp;
}
int _fwrite(_FILE *fp,const char*s,int len)
{
    memcpy(&fp->outbuffer[fp->out_pos],s,len);//这里省略了异常处理
    fp->out_pos+=len;

    if(fp->flag & FLUSH_NOW)
    {
        write(fp->fileno,fp->outbuffer,fp->out_pos);
        fp->out_pos=0;
    }
    else if(fp->flag & FLUSH_LINE)
    {
        if(fp->outbuffer[fp->out_pos-1]=='\n')//'\n'可能出现在字符中间，这时候需要对字符串做裁剪
        {
            write(fp->fileno,fp->outbuffer,fp->out_pos);
            fp->out_pos=0;
        }
    }
    else if(fp->flag & FLUSH_ALL)
    {
        if(fp->out_pos==SIZE)
        {
            write(fp->fileno,fp->outbuffer,fp->out_pos);//全写出去
            fp->out_pos=0;
        }
       
    }
    return len;//成功写入的长度
}
void _fflush(_FILE *fp)
{
    if(fp->out_pos>0)
    {
        write(fp->fileno,fp->outbuffer,fp->out_pos);
        fp->out_pos=0;
    }
}
void _fclose(_FILE *fp)
{
    if(fp==NULL)return ;
    _fflush(fp);
    close(fp->fileno);
    free(fp);
}

Main.c文件：

#include "Mystdio.h"

#define myfile "test.txt"
int main()
{
    _FILE* fp=_fopen(myfile,"w");
    if(fp==NULL)
    {
        return 1;
    }
    int cnt =10;
    while(cnt--)
    {
        const char* msage = "hello Linux\n";
        _fwrite(fp,msage,strlen(msage));
        sleep(1);

    }
    //_fflush(fp)
    return 0;
}

测试：

makefile文件：

在这里插入图片描述

while :;do cat test.txt;sleep 1;echo “----------------------”;done持续打印文件内容

在这里插入图片描述

一般C库函数写入文件时是全缓冲的，而写入显示器是行缓冲。 printf fwrite 库函数会自带缓冲区(进度条例子就可以说明)，当发生重定向到普通文件时，数据的缓冲方式由行缓冲变成了全缓冲。而我们放在缓冲区中的数据，就不会被立即刷新，甚至fork之后 但是进程退出之后，会统一刷新，写入文件当中。 但是fork的时候，父子数据会发生写时拷贝，所以当你父进程准备刷新的时候，子进程也就有了同样的 一份数据，随即产生两份数据。write没有变化，说明没有所谓的缓冲。

printf fwrite 库函数会自带缓冲区(用户级缓冲区)，而 write系统调用没有带缓冲区。(为了提升整机性能，OS也会提供相关内核级缓冲区)

文件系统

认识磁盘

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

  • 磁头是一面一个，磁头和盘面不接触，磁头臂会进行摆动来定位柱面或磁道（磁臂运动越少，效率越高，反之越低），所以在软件设计上一定要有意识将相关数据放在一起

磁盘的逻辑结构是线性的（对磁盘理解和建模）

在这里插入图片描述

  • 扇区的一般大小是512字节或者4kb

不仅CPU有寄存器，其他设备（外设）也存在寄存器

在这里插入图片描述

对磁盘进行分区

在这里插入图片描述

关于inode中的block数组：

inode中有struct inode结构体，里面包括了文件所有的属性，和一个blocks[15]数组，其中的下标[0, 11]直接保存的就是该文件对应的blocks编号，下标[12, 15]指向一个datablock，但是这个datablock不保存有效数据，而保存文件所适用的其它块的编号。（相当于一个二级索引）

stat +文件名查看文件的具体信息

在这里插入图片描述

ls -lia查看所有文件的信息（包括文件的inode）

ls -i查看当前目录下各文件的inode编号

在这里插入图片描述

启动块的大小是确定的，而块组的大小是由格式化的时候确定的，并且不可以更改。
文件 = 内容 + 属性，二者都是数据，都要存储。Linux采用的是将内容和属性数据分开存储的方案，内容在block中（4KB），内容是可以无限增多的。属性数据在inode中（128字节），文件的属性是稳定的。

注意一个要点，inode可能会存在用完的情况

  • Linux系统中，一个文件一个inode，每一个inode。每一个inode都有自己的inode编号（inode的设置是以分区为单位的，不能跨分区）
对目录的理解

Linux下一切皆文件，目录也是一个文件，通过文件名（对应的inode编号）-> 找到自己所处的目录 -> 根据目录的inode，找到目录的data block -> 将文件名和inode编号的映射关系写入到目录的数据块中。

在这里插入图片描述

在这里插入图片描述

  • 问题1:为什么同一个目录下不能存在同名文件？

因为一个文件只存在一个inode，文件名是作为key值去找inode的，如果存在同名文件就会破坏对应的映射关系。

  • 问题2:为什么没有w权限就不能创建文件？

即便是能创建文件，也不能将该文件与inode的映射关系写到数据块中。

  • 问题3:为什么没有r权限就不能查看文件？

无法拿到该目录文件中文件与inode之间的映射关系

  • 问题4:为什么没有x权限就不能进入目录？

不让用户更改环境变量中的目录信息

查找任何一个文件时，我们必须从当前目录递归到根目录，然后从根目录信息中查找对应子目录的inode信息（效率会低）

所以Linux中会存在提升效率的方法，将常用的路径信息进行缓存（dentry缓存，里面的结构算法较复杂）

软硬链接

建立软链接

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

软链接的inode不同

软连接又叫符号链接，软连接文件相当于源文件来说是一个独立的文件，该文件有自己的inode号，但是该文件只包含了源文件的路径名，所以软连接文件的大小要比源文件小得多。软连接就类似于Windows操作系统当中的快捷方式。软链接保存的是对应文件的所在路径

ln -s 对应的路径 软链接的名字添加快捷方式

建立硬链接

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

硬链接的inode相同，同时文件的引用计数变为了2

  • 硬连接数本质就是该文件inode属性中的计数器count，标识有几个文件名和我的inode建立了映射关系。简言之，就是有几个文件名指向我的inode（文件本身）硬链接就是让多个不在或者同在一个目录下的文件名，同时能够修改同一个文件，其中一个修改后，所有与其有硬链接的文件都一起修改了。

为什么文件被创建出来，默认的硬连接数是1？

  • 如果硬链接数是0，那么就应该是被关闭的文件了，所以至少应该从1开始。此外，普通文件的文件名，本身就和自己的inode具有映射关系，且只有1个，所以文件的默认硬连接数是1。

创建一个新目录时引用计数默认为2

在这里插入图片描述

在这里插入图片描述

  • 我们也可以根据系统的硬连接数，不进入文件，从而估算出文件的目录数（一个目录下相邻的子目录数 = 该目录的硬连接数 - 2）。因此，硬链接的一个作用就是进行路径切换。
软硬链接的删除

unlink（unlink也可以删除普通文件，与rm没什么区别）

在这里插入图片描述

文件的三个时间

在这里插入图片描述

这其中包含了文件的三个时间信息：

  • Access： 文件最后被访问的时间。
  • Modify： 文件内容最后的修改时间。
  • Change： 文件属性最后的修改时间。

当我们修改文件内容时，文件的大小一般会随之改变，所以Modify的改变会带动Change一起改变，但对该文件属性一般不会影响文件内容，所以一般情况下Change的改变不会带动Modify的改变。此外，我们可以使用touch命令把这三个时间都更新到最新状态。（当一文件存在时使用touch命令，此时touch命令的作用变为更新文件信息）。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1187084.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

20 _ 散列表（下）：为什么散列表和链表经常会一起使用？

20 _ 散列表（下）：为什么散列表和链表经常会一起使用？

有两种数据结构，散列表和链表，经常会被放在一起使用。 例如，如何用链表来实现LRU缓存淘汰算法，但是链表实现的LRU缓存淘汰算法的时间复杂度是O(n)，当时我也提到了，通过散列表可以将这个时间复杂度降低到O(1)。 Redis的有序集合是使用跳表来实现的，跳表可以看作一种改进…
阅读更多...
SpringBoot中的Environment

SpringBoot中的Environment

暂且理解成整个application.properties 通过Environment 可以访问application.properties中的任何配置 这里用yml配置 具体实用
阅读更多...
CSS 对齐、组合选择符、伪类、伪元素、导航栏

CSS 对齐、组合选择符、伪类、伪元素、导航栏

一、CSS 对齐&#xff1a; 1&#xff09;、元素居中对齐&#xff1a; 水平居中对齐一个元素&#xff0c;可以使用margin&#xff1a;auto&#xff0c;设置到元素的宽度将防止它溢出到容器的边缘。元素通过指定宽度&#xff0c;并将两边的空外边距平均分配。示例&#xff1a; …
阅读更多...
如何快速教你看自己电脑cpu是几核几线程

如何快速教你看自己电脑cpu是几核几线程

目录 一、我们日常中说的电脑多少核多少线程&#xff0c;很多人具体不知道什么意思&#xff0c;下面举例4核和4线程什么意思。二、那么4线程又是怎么回事呢&#xff1f;三、那么知道了上面的介绍后怎么看一台电脑是几核&#xff0c;几线程呢&#xff1f; 一、我们日常中说的电脑…
阅读更多...
C语言每日一题（26）移除链表元素

C语言每日一题（26）移除链表元素

力扣网 203. 移除链表元素 题目描述 给你一个链表的头节点 head 和一个整数 val &#xff0c;请你删除链表中所有满足 Node.val val 的节点&#xff0c;并返回 新的头节点 。 思路分析 针对如图的普通情况&#xff0c;不能简单的遍历到对应位置然后进行释放&#xff0c;一方…
阅读更多...
Linux内核有什么之内存管理子系统有什么第三回 —— 小内存分配（1）

Linux内核有什么之内存管理子系统有什么第三回 —— 小内存分配（1）

接前一篇文章&#xff1a;Linux内核有什么之内存管理子系统有什么第二回 —— 单刀直入 本文内容参考&#xff1a; 内存分配不再神秘&#xff1a;深入剖析malloc函数实现原理与机制 系统调用与内存管理&#xff08;sbrk、brk、mmap、munmap&#xff09; 特此致谢&#xff01;…
阅读更多...
智安网络|探索人机交互的未来：自然语言处理的前沿技术

智安网络|探索人机交互的未来：自然语言处理的前沿技术

自然语言处理是人工智能领域中研究人类语言和计算机之间交互的一门学科。它涉及了语言的理解、生成、翻译、分类和摘要等多个方面。随着人们对自然语言处理的重视和需求不断增长&#xff0c;成为了热门的研究方向。 首先&#xff0c;我们需要了解自然语言处理的基本概念。自然…
阅读更多...
Qt实现动态桌面小精灵（含源码）

Qt实现动态桌面小精灵（含源码）

目录 一、设计思路 二、部分源码演示 三、源码地址 🌈write in front🌈 🧸大家好，我是三雷科技.希望你看完之后，能对你有所帮助，不足请指正！共同学习交流. 🆔本文由三雷科技原创 CSDN首发🐒 如需转载还请通知⚠️ 📝个人主页：三雷科技🧸—CSDN博客 🎁欢…
阅读更多...
c语言贪吃蛇项目的实现

c语言贪吃蛇项目的实现

ncurse的引入 ncurse的概念 ncurse(new curses)是一套编程库&#xff0c;它提供了一系列的函数&#xff0c;以便使用者调用它们去生成基于文本的用户界面。 ncurses是一个能提供功能键定义(快捷键),屏幕绘制以及基于文本终端的图形互动功能的动态库。ncurses用得最多的地方是…
阅读更多...
C++二分算法： 找出第 K 小的数对距离

C++二分算法： 找出第 K 小的数对距离

题目 数对 (a,b) 由整数 a 和 b 组成&#xff0c;其数对距离定义为 a 和 b 的绝对差值。 给你一个整数数组 nums 和一个整数 k &#xff0c;数对由 nums[i] 和 nums[j] 组成且满足 0 < i < j < nums.length 。返回 所有数对距离中 第 k 小的数对距离。 示例 1&#x…
阅读更多...
LeetCode-94. 二叉树的中序遍历（C++）

LeetCode-94. 二叉树的中序遍历（C++）

目录捏 一、题目描述二、示例与提示三、思路四、代码 一、题目描述 给定一个二叉树的根节点 root &#xff0c;返回 它的 中序 遍历 。 二、示例与提示 示例 1&#xff1a; 输入&#xff1a; root [1,null,2,3] 输出&#xff1a; [1,3,2] 示例 2&#xff1a; 输入&#xf…
阅读更多...
引入依赖时，对应类能点击进入，运行时报错

引入依赖时，对应类能点击进入，运行时报错

引入依赖时&#xff0c;对应类能点击进入&#xff0c;运行时报错 一、问题二、解决问题的过程三、解决方式1、排除其中一个依赖的公共包2、升级旧依赖 一、问题 我的问题是这样的&#xff1a;以前引入了阿里云文字识别的依赖&#xff0c;最近要调用视频活体检测的接口&#xf…
阅读更多...
flutter笔记：骨架化加载器

flutter笔记：骨架化加载器

flutter笔记 骨架化加载器 - 文章信息 - Author: Jack Lee (jcLee95) Visit me at: https://jclee95.blog.csdn.netEmail: 291148484163.com. Shenzhen ChinaAddress of this article:https://blog.csdn.net/qq_28550263/article/details/134224135 【介绍】&#xff1a;本文介…
阅读更多...
windows服务器限制特定ip访问指定端口(服务器ip白名单)

windows服务器限制特定ip访问指定端口(服务器ip白名单)

有些时候我们需要限制特定的ip白名单来访问服务器的指定端口&#xff0c;来防止dos攻击或其他危险访问&#xff0c;我们可以通过防火墙来实现这一需求&#xff0c;下面一起看一下&#xff1a; 1.首先开启防火墙 ps:开启防火墙可能有些端口会无法访问&#xff0c;比如80、443等…
阅读更多...
【JavaEE】HTTPS协议（对称加密、非对称加密、中间人攻击、证书）

【JavaEE】HTTPS协议（对称加密、非对称加密、中间人攻击、证书）

一、什么是HTTPS&#xff1f; 1.1 什么是HTTPS&#xff1f; HTTPS 也是一个应用层协议. 是在 HTTP 协议的基础上引入了一个加密层 1.2 为什么引入HTTPS&#xff1f; HTTP 协议内容都是按照文本的方式明文传输的. 这就导致在传输过程中出现一些被篡改的情况 比如臭名昭著的…
阅读更多...
Java --- Mybatis的动态sql标签

Java --- Mybatis的动态sql标签

一、if标签 <select id"queryEmpByCondition" resultType"User">select * from t_user where 11<if test"username ! null and username ! ">and username #{username}</if></select> if&#xff1a;根据标签中的test…
阅读更多...
用Powershell实现：删除所有不是与.json文件重名的.jpg文件

用Powershell实现：删除所有不是与.json文件重名的.jpg文件

# 指定要搜索的目录路径 $directoryPath "C:\path\to\your\directory"# 获取该目录下的所有.jpg和.json文件 $jpgFiles Get-ChildItem -Path $directoryPath -Filter *.jpg $jsonFiles Get-ChildItem -Path $directoryPath -Filter *.json | Select-Object -Expan…
阅读更多...
2022最新版-李宏毅机器学习深度学习课程-P34 自注意力机制类别总结

2022最新版-李宏毅机器学习深度学习课程-P34 自注意力机制类别总结

在课程的transformer视频中&#xff0c;李老师详细介绍了部分self-attention内容&#xff0c;但是self-attention其实还有各种各样的变化形式&#xff1a; 一、Self-attention运算存在的问题 在self-attention中&#xff0c;假设输入序列&#xff08;query&#xff09;长度是N…
阅读更多...
【论文阅读】PSDF Fusion：用于动态 3D 数据融合和场景重建的概率符号距离函数

【论文阅读】PSDF Fusion：用于动态 3D 数据融合和场景重建的概率符号距离函数

【论文阅读】PSDF Fusion&#xff1a;用于动态 3D 数据融合和场景重建的概率符号距离函数 Abstract1 Introduction3 Overview3.1 Hybrid Data Structure3.2 3D Representations3.3 Pipeline 4 PSDF Fusion and Surface Reconstruction4.1 PSDF Fusion4.2 Inlier Ratio Evaluati…
阅读更多...
Apache Storm 2.5.0 单机安装与配置

Apache Storm 2.5.0 单机安装与配置

1、下载storm 2.5.0 2、需要安装python3&#xff0c;并且设置python3的环境变量 3、修改storm.yaml配置 storm.zookeeper.servers:- "node4" # - "server2" # # nimbus.seeds: ["host1", "host2", "host3"] # nimbus…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023