Linux 文件操作总结

http://blog.163.com/he_junwei/blog/static/19793764620152592737741/

ioctl?? lseek??

文件是linux中的一个重要概念。在Linux中,一切(几乎一切)都是文件。简单的说,C中基本的的printf()函数,scanf()函数,其实都属于文件操作。

对于文件操作,虽然都是通过函数调用的方式实现,却还是能分为两类:系统调用和库函数。

这篇文章将先介绍linux中文件的概念,系统调用和库函数的概念 ,然后具体的讨论两种方式下的文件操作。

博文的主要内容如下:

  1. Linux 中的文件
  2. 文件访问-库函数
  3. 文件访问-系统调用
  4. 库函数
  5. 标准 I/O 库
  6. /proc文件系统

1 Linux中的文件

1.1概念

按照普通的定义,文件不过是一堆数据,在往下说,就是存储器中的0101。。。而我们这里讨论的文件有了更广的定义。对于Linux中的文件,我的理解是:

Linux中的文件具有的特点是:可通过操作系统或者程序对外提供信息,也能对内输入信息,可以被创建,删除。

Linux中,文件有特别重要的意义,他们为操作系统和设备提供了一个简单而统一的接口。在Linux中,几乎一切都可以看做是文件 。

这就意味着,普通程序完全可以像使用文件(普通定义)那样使用磁盘文件、串行口、打印机和其他设备。

硬件设备在linux操作系统中也被表示为文件。例如,可以通过如下命令把cd-rom驱动器挂载为一个文件,

#mount -t iso9660 /dev/hdc /mnt/cdrom

#cd /mnt/rom

然后,就能像访问普通文件那样在cd-rom目录中漫游。

1.2操作

和操作一般意义上的文件一样,linux中对文件的操作只需要五个基本的函数:

open、close、read、write和ioctl

通过调用这几个函数就能对linux中的文件进行读、写等操作。不过,这种操作又分为系统调用和库函数调用。简单的说,系统调用是最直接的方式,

库函数调用最终也是通过系统调用实现的。可认为库函数调用是对系统调出于效率考虑而做出的优化。

库函数调用和系统调用的区别和联系请参看:linux系统调用和库函数调用的区别

我们用很少的函数就可以对文件和设备进行访问和控制。这些函数就是所谓的系统调用,由操作系统直接提供,他们是通向操作系统本身的接口。

操作系统的核心部分,既内核,其实就是一组设备驱动程序。这是一些对硬件进行控制的接口。

2 文件访问-系统调用

通过系统调用来访问文件是最直接的方式。系统调用函数直接作用于操作系统内核的设备驱动程序从而实现文件访问。

2.1 文件描述符

在系统中需要处理的文件(读、写操作)需要一个标识,以便在其它地方能识别出这个文件,于是就产生了文件描述符。文件描述符是一些小值整数,简单的说就是

一个文件ID用于在系统中唯一的标识文件。文件描述符的总数也就是系统可以打开文件的最多个数,这取决于系统的配置情况。

当开始运行程序时,也就是系统开始运行时,它一般会有三个已经打开的文件描述符。他们是:

  • 0:标准输入
  • 1:标准输出
  • 2:标准错误

其它文件的文件描述符,在调用文件打开函数open时返回。这就是说,每个设备对应着一个文件描述符。文件描述符由操作系统分配,每次分配最小的。

2.2 write系统调用

write,就是把缓冲区的数据写入文件中。注意,这里的文件时广泛意义的文件,比如写入磁盘、写入打印机等等。

Linux 中write()的函数原型:

size_t write(int fildes, const void *buf, size_t nbytes);

参数说明:

fildes:文件描述符,标识了要写入的目标文件。例如:fildes的值为1,就像标准输出写数据,也就是在显示屏上显示数据;如果为 2 ,则想标注错误写数据。

*buf:待写入的文件,是一个字符串指针。

nbytes:要写入的字符数。

函数返回值:size_t  返回成功写入文件的字符数。需要指出的是,write可能会报告说他写入的字节比你所要求的少。这并不一定是个错误。在程序中,你需要检查

error已发现错误,然后再次调用write写入剩余的数据。

请看下面的例子:

运行结果:

这个程序只在标准输出上显示一条消息。

read系统调用

系统调用read是从文件中读出数据。要读取的文件用文件描述符标识,数据读入一个事先定义好的缓冲区。他返回实际读入的字节数。

Linux中read的函数原型:

size_t read(int fildes, void *buf, size_t nbytes);

参数说明:

fildes:文件描述符,标识要读取的文件。如果为0,则从标准输入读数据。类似于scanf()的功能。

*buf:缓冲区,用来存储读入的数据。

nbytes:要读取的字符数。

返回值:size_t返回成功读取的字符数,它可能会小于请求的字节数。

运行结果:

open系统调用

系统调用open的作用是打开一个文件,并返回这个文件的描述符。

简单地说,open建立了一条到文件或设备的访问路径。如果操作成功,它将返回一个文件描述符,read和write等系统调用使用该文件描述符对文件或

设备进行操作。这个文件描述符是唯一的,他不会和任何其他运行中的进程共享。如果两个程序同时打开一个文件,会得到两个不同的问价描述符。如果

同时对两个文件进行操作,他们各自操作,互补影响,彼此相互覆盖(后写入的覆盖先写入的)为了防止文件按读写冲突,可以使用文件锁的功能。这不是

本次重点,以后介绍。

Linux中open的函数原型有两个:

int open(const char *path, int oflags);

int open(const char *path, int oflags, mode_t mode );

参数说明。

path:准备打开的文件或设备名字。

oflags:指出要打开文件的访问模式。open调用必须指定如下所示的文件访问模式之一:

open调用哈可以在oflags参数中包括下列可选模式的组合(用”按位或“操作):

  • O_APPEDN: 把写入数据追加在文件的末尾。
  • O_TRUNC: 把文件长度设为零,丢弃以后的内容。
  • O_CREAT: 如果需要,就按参数mode中给出的访问模式创建文件。
  • O_EXCL: 与O_CREAT一起调用,确保调用者创建出文件。使用这个模式可防止两个程序同时创建一个文件,如果文件已经存在,open调用将失败。

关于其他可能出现的oflags值,请看考open的调用手册。

mode:

当使用哦、O_CREAT标志的open来创建文件时,我们必须使用三个参数格式的open调用。第三个参数mode 是几个标志按位OR后得到的。他们是:

  • S_IRUSR: 读权限,文件属主。
  • S_IWUSR:写权限,文件属主。
  • S_ IXUSR:执行权限,文件属主。
  • S_IRGRP:读权限,文件所属组。
  • S_IWGRP:写权限,文件所属组。

。。。。

请看下面例子:

open("myfile", O_CREAT, S_IRUSR|S_IXOTH ;

他的作用是创建一个名为myfile 的文件,文件属主拥有读权限,其他用户拥有执行权限,且只有这些权限。

运行结果:

程序创建了一个名为myfile的文件,文件属主有读权限,其他用户有执行权限,且只有这些权限。

close系统调用

close系统调用用于“关闭”一个文件,close调用终止一个文件描述符fildes以其文件之间的关联。文件描述符被释放,并能够重新使用。

close成功返回1,出错返回-1.

#Include<unistd.h>

int close(int fildes);

ioctl系统调用

ioctl提供了一个用于控制设备及其描述符行为和配置底层服务的接口。终端、文件描述符、甚至磁带机都可以又为他们定义的ioctl,具体

细节可以参考特定设备的使用手册。

下面是ioctl 的函数原型

#include<unistd.h>

int ioctl(int fildes, int cmd,,,,,,);

ioctl对描述符fildes指定的对象执行cmd 参数中所给出的操作。

其他和文件管理有关的系统调用

还有许多其他的系统调用能对文件进行操作。

几个常用的如:lseek()对文件描述符fildes指定文件的读写指针进行设置,也就是说,它可以设置文件的下一个读写位置。

fstat,stat,lstat 是和文件描述符相关的函数操作,这里就不做介绍。

dup,dup2系统调用。dup提供了复制文件描述符的方法,使我们能够通过两个或者更多个不同的文件描述符来访问同一个文件。这可以用于

在文件的不同位置对数据进行读写。

4 库函数

在输入、输出操作中,直接使用系统调用效率会非常底。具体原因有二:

  • 系统调用会影响系统性能。与函数调用相比,系统调用的开销大。因为在执行系统调用的时候,要切换到内核代码区执行,然后再返回用户代码。这必然就需要大量的时间开支。一种解决办法是:尽量减少系统调用的次数,让每次系统调用完成尽可能多的 任务。例如每次系统调用写入大量的字符而不是单个字符。
  • 硬件会对系统调用一次能读写的数据块做一定的限制。例如,磁带机通常的写操作数据块长度是10k,如果缩写数据不是10k的整数倍,磁带机还是会以10k为单位绕磁带,这就在磁带上留下空隙。

为了提高文件访问操作的效率,并且使得文件操作变得更方便,Linux发行版提供了一系列的标准函数库。他们是一些由函数构成的集合,你可以在自己的程序方便的中使用它们,

去操作文件。提供输出缓冲功能的标准I/O库就是这样的例子。你可以高效的写任意长度的数据块,库函数则在需要的时候安排底层函数调用(系统调用)

也就是说,库函数在用户和系统之间,增加了一个中间层。如下图所示:

库函数是根据实际需要而包装好的系统调用,用户可在程序中方便的使用库函数,如标准I O库(稍后会讲)

5 标准I/O库

标准I/O库及其头文件<stdio.h>为底层I/O系统调用提供了一个通用的接口。这个库现在已经成为ANSI标准C的一部分,而前面所讲的系统调用却不是。

标准I/O库提供了许多复杂功能的函数,用于格式化输出和扫描输入,它还负责满足设备的缓冲需求。

在许多方面,使用标准I/O库和使用底层文件描述符类似。需要先打开一个文件,已建立一个文件访问路径(也就是系统调用中的文件描述符)

在标准I/O库中,与文件描述符对应的叫 流(stream),它被实现为指向结构FILE的指针。

在启动程序时,有三个文件流是自动打开的。他们是:

  • stdin: 标准输入
  • stdout: 标准输出
  • stderr: 标准错误输出

下面会介绍一些常用的I/O库函数:

5.1 fopen函数

fopen函数类似于系统调用中的open函数。和open一样,它返回文件的标识符,只是这里叫做流(stream),在库函数里实现为一个指向文件的指针。

如果需要对设备的行为进行明确的控制,最好使用底层系统调用,因为这可以避免使用库函数带来的一些非预期的副作用,如输入/输出缓冲。

函数原型:

#include<stdio.h>

FILE *fopen(const char *filename, const char *mode);

参数说明:

*filename:打开文件的文件名

*mode:打开的方式

r 以只读方式打开文件,该文件必须存在。
  r+ 以可读写方式打开文件,该文件必须存在。
  rb+ 读写打开一个二进制文件,允许读数据。
  rw+ 读写打开一个文本文件,允许读和写。
  w 打开只写文件,若文件存在则文件长度清为0,即该文件内容会消失。若文件不存在则建立该文件
  w+ 打开可读写文件,若文件存在则文件长度清为零,即该文件内容会消失。若文件不存在则建立该文件。

fopen在成功是返回一个非空的FILE *指针。失败返回NULL

5.2 fread/fwrite函数

fread函数从文件流中读取数据,对应于系统调用中的read;fwrite函数从文件流中写数据,对应于系统调用中的write

函数原型:

#include<stdio.h>

size_t  fread(void *ptr, size_t size, size_t nitems, FILE *stream);

参数说明:

*ptr 要读取数据的缓冲区,也就是要存放读取数据的地方。

size:指定每个数据记录的长度。

nitems: 计数,给出要传输的记录个数。

返回值:成功读取到数据缓冲区的记录个数,当到达文件尾时,他的返回值可能会消耗与nitems,甚至可以是0

size_t  fwrite(const coid *ptr, size_t size , size_t nitimes, FILE *stream);

他从指定的数据缓冲区ptr中把数据写入文件流,返回成功写入的记录个数。

5.3 fclose函数

fclose函数关闭指定的文件流stream,这个操作会使所有未写出的数据都写出。因为stdio库函数会对数据进行缓冲,所有调用fclose函数是很重要的。

如果程序需要确保数据已经全部写出,就应该调用fclose函数。虽然程序正常结束时,也会自动的调用fclose函数,但这样就不能检测出调用fclose所产生的错误了。

函数原型如下:

#include<stdio,h>

int fclose(FILE *stream);

5.4 fflush函数

fflush函数的作用是把文件流中所有未写出的数据全部写出。 处于效率考虑,在使用库函数的时候会使用数据缓冲区,当缓冲区满的时候才进行写操作。使用fflush函数

可以将缓冲区的数据全部写出,而不关心缓冲区是否满。fclose的执行隐含调用了fflush函数,所以不必再fclose执行之前调用fflush。

函数原型:

#include<stdio.h>

int fflush(FILE *stream);

6 /proc文件系统

Linux将一切看做文件,硬件设备在文件系统中也有相应的条目。/dev目录中的文件使用底层系统调用这样一种特殊方式来访问硬件。

/proc文件系统,可以看做是一个特殊的文件系统,在这个系统中,每个文件都对应一个独立的硬件,所以用户可以通过proc文件系统像访问文件一样来访问硬件设备。

该文件系统通常表现为/proc 目录。该目录中包含了许多特殊文件以允许对驱动和内核信息进行高层访问。

如果你想知道CPU的信息,内核版本信息等,就可以通过proc文件系统。

/proc目录中的文件会随系统的不同而不同。我的电脑上的/proc 中的文件如下所示:

在多数情况下,直接读取这些文件就可以获得状态信息。

6.1 访问设备信息

例如,获取CPU的信息:

内存使用信息(只显示里局部~):

每次读这些文件的内容时,他们所提供的信息都会及时更新。所以再读一次meminfo文件会得到不同的结果。

由特定内核函数给出的更多信息可以在proc目录的子目录中查到。

6.2 查看内核函数给出的信息

例如:查看网络套接字的使用统计:

6.3通过proc查看进程信息

用ps 命令可得到当前正在运行的进程,每个进程在proc中都有相应的信息文件,通过查看这个文件,可以得知进程相关的信息:

进程2754的当前工作目录是:/hme/yyl

程序 /bin/su正在运行,还有其他信息此处不再说明;

修改proc文件系统内容

例如,系统中所有运行的程序同时打开的文件总数是Linux内核的一个参数。

如果我们想要增大这个歌值,则可通过写同一个文件来实现。

注意:对proc的写操作要注意权限问题,在修改时要小心,不适当的值可能会影响到系统的一运行。

时间: 2024-10-11 12:24:53

Linux 文件操作总结的相关文章

linux文件操作

1.linux文件操作 cat test.txt | head -n 100 查看开始100行 cat finalout.txt | head -n 100 | cut -d , -f 2   安装,分割各行,取第2个位置的数据 cat test.txt |sed 's/""//g' 查看下效果 cat finalout.txt | head -n 10 | cut -d , -f 2 按,切割 cat part_name_tmp.txt | cut -d \" -f 2 &

关于Linux文件操作1.1

本文章记录本人在学习Linux中遇到的一些比较好的题目,给大家分享一下. 先来实验题目: 编程实现一个程序,功能是每一秒钟向屏幕打印当前系统时间,和当前行号示例如下 该程序应该无限循环,直到强制中断该进程为止(比如按Ctrl-C中断程序).接着再启动程序,将系统时间追加到原文件之后,并且序号能够接续上次的序号: 好了看完题目后我们应该想的是,实现这么一个功能我们需要什么知识? 我们实现功能的逻辑是什么? 我们在写代码中有什么细节需要注意的(PS:使代码尽善尽美!) a):  先花五分钟想一下这个

Linux文件操作学习总结【转载】

本文转载自: http://blog.csdn.net/xiaoweibeibei/article/details/6556951 文件类型:普通文件(文本文件,二进制文件).目录文件.链接文件.设备文件.管道文件. 文件的权限:读.写.执行 文件的相关信息:目录结构.索引节点.文件数据 索引节点的stat结构 struct stat{ dev_t st_dev;//文件使用的设备号 ino_t st_inl;//索引节点号 mode_t st_mode;//文件访问权限 nlink_t st_

Linux文件操作相关函数

一.整体大纲 st_mode整体介绍: st_mode详细介绍: 二. Linux文件操作相关函数 1. stat 作用:获得文件信息,也可以获取文件大小. 头文件 #include <sys/types.h> #include <sys/stat.h> #include <unistd.h> 函数原型 int stat(const char *path, struct stat *buf); int fstat(int fd, struct stat *buf); i

Linux 文件操作监控inotify功能及实现原理【转】

转自:http://blog.chinaunix.net/uid-26585427-id-5012973.html 1. inotify主要功能 它是一个内核用于通知用户空间程序文件系统变化的机制. 众所周知,Linux 桌面系统与 MAC 或 Windows 相比有许多不如人意的地方,为了改善这种状况,开源社区提出用户态需要内核提供一些机制,以便用户态能够及时地得知内核或底层硬件设备发生了什么,从而能够更好地管理设备,给用户提供更好的服务,如 hotplug.udev 和 inotify 就是

Linux文件操作的常用系统函数说明

1. open打开文件 (man 2 open 查看) int open(const char *pathname, int flags); //pathname文件名(路径):flags打开模式,有O_RDONLY, O_WRONLY, O_RDWR int open(const char *pathname, int flags, mode_t mode); //该函数一般用于创建新文件,flags添加O_CREAT,比如:O_RDWR|O_CREAT int creat(const cha

linux 文件操作库函数

fopen :打开文件 fread :读文件 fwrite : 写文件 fgetc : 读字符 fputc : 写字符 fscanf : 格式化读 fprintf : 格式化写 fseek : 文件偏移量定位 getcwd .getwd.get_current_dir_name : 获取当前路径 mkdir : 创建目录 feof : 检测文件尾 ferror : 检测文件操作是否成功 fileno : 将文件指针转换为文件描述符

linux文件操作篇 (四) 目录操作

#include <sys/stat.h>#include <unistd.h>#include <dirent.h> //创建文件夹 路径 掩码 int mkdir(const char *path, mode_t mode); // 获取当前工作路径 buf用于接受路径缓存 char *getcwd(char *buf, size_t size); // 进入文件夹 和cd一样 int chdir(const char *path); //打开路径并建立子目录流,返

linux 文件操作编程

Linux中所有的设备和文件的操作都使用文件描述符来进行. 文件描述符是一个非负的整数,它是一个索引值,指向内核中每个进程打开的记录表. 当打开一个文件或者创建一个新文件时,内核就向进程返回一个文件描述符;当需要读写文件的时候,就要把文件描述符作为参数传递给相应的函数. 一个进程时,都会打开3个文件:标准输入.标准输出和标准出错处理.分别对应文件描述符的0.1.2. rename函数 #include <stdio.h> int rename(const char *oldpath, cons