谈谈Linux下的数据流重定向和管道命令

一、标准输入、标准输出、错误输出概述

  1.标准输入(stdin)是指令数据的输入,代码为0,使用<或者<<,默认是键盘。

  2.标准输出(stdout)是指令执行成功返回的结果,代码为1,使用>或者>>,默认在屏幕显示。

  3.标准错误输出(stderr)是指令执行失败返回的错误信息,代码为2,使用2>或者2>>,默认是屏幕。

二、数据流重定向的使用
      1."<":指定输入的数据媒介来源(tr ‘a-z‘ ‘A-Z‘ < 文件名:将指定文件中的小写字母变为大写字母输出到屏幕)

   2.">"、"1>":将正确的内容覆盖输出到指定的媒介

   3.">>"、"1>>":将正确的内容追加到指定的媒介

   4."2>":将错误覆盖输出到指定的媒介

   5."2>>":将错误信息追加输出到指定的媒介

   6."&>":将正确内容和错误信息覆盖输出到指定媒介

   7."&>>":将正确内容和错误信息追加到指定的媒介

   8.多个指令执行
            bash1&&bash2(前者执行成功才会执行后者)

     bash1||bash2(前者执行完毕且失败才执行后者)

三、管道命令概述

  1.管道命令能够将一个命令的执行结果经过筛选,只保留我们需要的信息。 如,/etc目录下会有大量的文件,如果使用ls很难找到需要的文件,因此可以使用管道命令将ls的结果进行一次筛选,只保留需要的信息。 

  2.管道和数据流重定向的区别:

    管道一词非常生动形象,原始数据经过管道后,管道会将一部分不需要的信息过滤掉,只保留用户所关注的信息。

    数据流重定向是指定数据在哪里显示,默认情况下会在屏幕显示,我们可以指定它输出到文件。

  3.管道命令通过管道符"|"连接

  4.能够接收标准输入(stdin),如tail/more/grep等

  5.能够接收来自前一个指令的数据成功stdin进行处理

四、管道命令的使用

  1.cut:为剪切的意思,它能将一行行的数据按照指定的分隔符切成一列列,然后只显示特定列的数据.

    cut -d ‘分隔符‘ -f n 按照特定的分隔符将数据切分,并只显示第n列的数据。

    cut -c 起始字符的下标-结束字符的下标 选择特定范围内的数据(cut中涉及的下标均从1开始)

  2.grep:关键字查找

    grep [-cinv] [--color=auto] ‘关键词‘ 待查找的文件名

      -c:统计关键词出现的次数

      -i:关键词忽略大小写

      -n:输出行号

      -v:反向选择,即查找不包含该关键字的行

      --color=auto:关键词高亮

    命令 | grep [-参数] ‘关键词’  采用管道,将前一个命令的执行结果输出给grep,并通过grep的关键词搜索将符合条件的行搜索出来。

  3.sort:排序

    sort [-参数] 文件

      -t:指定分隔符

      -k:选取分隔符后的第几个字段进行排序

      -f:排序时忽略选取字段的大小写

      -b:取出选取字段前的空格

      -M:将选取的字段按照月份来排序(前提是选取字段就是月份)

      -n:将选取字段按照数据来排序(前提是选取字段就是数字)

      -r:反向排序

      -u:去重,若选取字段有重复,则去掉重复

    命令 | sort [-参数]   使用管道,将前一个命令执行的结果按照指定字段进行排序。

  4.uniq:只能用于管道,它能够去除前一个命令执行的结果中完全一样的行。

    uniq [-参数] -i:忽略大小写 -c:进行重复行的统计

  5.wc:统计字数、行数、字符数

    wc [-参数] 文件名

     -l 列出行数

     -w 列出字数

     -c 列出字符数

  6.tee:能够同时将命令执行的结果输出到指定的文件和屏幕。只能结合管道使用

    tee [-a] 文件 -a:以追加的形式写入文件。

  7.join:连接两个文件

    这个命令与管道无关。 它相当于数据库中的join连接,将两张表中指定字段,且字段相同的行连接起来。在这里,它能够将两个文件中指定字段的相同字段连接起来,并成一行。

    join [-参数] 文件1 文件2

      -t:两个文件的字段分隔符

      -1:第一个文件的字段

      -2:第二个文件的字段

      -i:忽略所选字段的大小写

  8.split:该命令能将一个大文件切分成若干个小文件。

    split [-参数] 大文件 小文件名字前缀

      -b:指定小文件的大小,需要加上单位:b、k、m -l:指定每个小文件中的行数。  

    大文件会被切分成若干个小文件,且小文件的名字为:小文件名字前缀+aa、小文件名字前缀+ab、小文件名字前缀+ac.

      

时间: 2024-10-11 15:22:42

谈谈Linux下的数据流重定向和管道命令的相关文章

linux下的IO重定向与管道相关的知识简析

一.bash重定向部分简单翻译 1.1.bash手册关于重定向短短的注解(因为过于经典,所以摘录出来) 我的翻译要开始毁经典啦... 参考:https://blog.csdn.net/spch2008/article/details/51433353/ https://www.cnblogs.com/lqminn/archive/2013/05/30/3108283.htmlhttps://bash.cyberciti.biz/guide/Here_stringshttps://bbs.csdn

数据流重定向和管道命令(bash学习02)

标准输入输出和错误 标准输入(stdin) 是指令数据的输入,代码为0,使用<或者<<,默认是键盘 标准输出(stdout)是指令执行成功返回的结果,代码为1,使用>或者>>,默认由屏幕显示 标准错误输出(stderr)是指令执行失败返回的错误信息,代码为2,使用2>或者2>>,默认是屏幕 < 指定输入的数据媒介来源1> 将正确的内容 覆盖输出到指定的媒介1>> 将正确的内容 追加到指定的媒介2> 将错误信息覆盖输出到指定

Linux上的IO重定向及管道-&&gt; &&gt;&gt; 2&gt; 2&gt;&gt; 2&gt;&1 2&gt;&gt;&1 | tee tr

IO重定向: 输出重定向:> 特性:覆盖输出 输出重定向:>> 特性:追加输出 # set -C 禁止覆盖输出重定向至已存在的文件: 此时可使用强制覆盖输出:>| # set +C 关闭上述特性 错误输出流重定向:2>, 2>>  只会将错误的信息输出到指定的地方 合并正常输出流和错误输出流: (1) &>, &>> (2) COMMAND > /path/to/somefile 2>&1 COMMAND &g

谈谈Linux下动态库查找路径的问题 ldconfig LD_LIBRARY_PATH PKG_CONFIG_PATH

谈谈Linux下动态库查找路径的问题 ldconfig LD_LIBRARY_PATH  PKG_CONFIG_PATH 转载自:http://blog.chinaunix.net/xmlrpc.php?r=blog/article&uid=23069658&id=4028681 学习到了一个阶段之后,就需要不断的总结.沉淀.清零,然后才能继续“上路”.回想起自己当年刚接触Linux时,不管是用源码包编译程序,还是程序运行时出现的和动态库的各种恩恩怨怨,心里那真叫一个难受.那时候脑袋里曾经

构建LINUX下的入侵检测系统——LIDS 系统管理命令--vlock

构建LINUX下的入侵检测系统——LIDS   系统管理命令--vlock http://blog.chinaunix.net/uid-306663-id-2440200.html LIDS的组成两个用户态工具和一些文件,和一个内核补丁/sbin/目录 存放LIDSADM命令和LIDSCONF命令 /etc/lids/lids.conf #ACLS配置文件/etc/lids/lids.cap #LIDS capabilities(功能)配置文件/etc/lids/lids.pw #LIDS密码文

Linux下的压缩zip,解压缩unzip命令详解及实例

Linux下的压缩zip,解压缩unzip命令 本人亲自测试总结: linux 安装unzip zip 安装命令:yum install -y unzip zip # unzip yasuo.zip 方法一: 安装命令:yum install -y unzip zip 1. 我想把一个文件abc.txt和一个目录dir1压缩成为yasuo.zip:# zip -r yasuo.zip abc.txt dir12.我下载了一个yasuo.zip文件,想解压缩: # unzip yasuo.zip

Linux下的crontab定时执行任务命令详解

Linux下的crontab定时执行任务命令详解 在LINUX中,周期执行的任务一般由cron这个守护进程来处理[ps -ef|grep cron].cron读取一个或多个配置文件,这些配置文件中包含了命令行及其调用时间.cron的配置文件称为"crontab",是"cron table"的简写. 一.cron服务 cron是一个linux下 的定时执行工具,可以在无需人工干预的情况下运行作业. service crond start    //启动服务 servi

linux下设置SMTP服务器并用mail命令发送邮件精解

在linux下设置SMTP服务器并用mail命令发邮件精解步骤: 1.vi /etc/mail.rc 在末尾追加如下内容: set [email protected]    //默认对外发送邮件的用户邮箱地址set smtp=smtp.domain.com    //选用默认发送邮件的公共邮件域名set [email protected]    //默认对外发邮件的用户set smtp-auth-password=password    //对应默认用户的密码set smtp-auth=logi

Linux下df与du两个命令的差别?

Linux下df与du两个命令的差别? 一.df显示文件系统的使用情况,与du比較,就是更全盘化. 最经常使用的就是 df -T,显示文件系统的使用情况并显示文件系统的类型. 举比例如以下: [[email protected] ~]# df -T Filesystem Type 1K-blocks Used Available Use% Mounted on /dev/mapper/VolGroup-lv_root ext4 18134344 780860 16432296 5% / tmpf