Pipeline 与 xargs

Pipeline 与 xargs

Pipeline与命令行参数

应用程序接收输入的两种方式:

  • 命令行参数

输入字符串被当成参数,通过int main(int argc, char **argv), 中的argv传入。或使用

下面API获取,再自己分析:

LPTSTR WINAPI GetCommandLine(void); 
  • Pipeline

指示输入内容存放在标准输入上,标准输入可以理解成一个文件,一般是字符界面终端,

也可以是一个临时文件。

Pipeline

stdin,stdout 与 stderr

一般情况下,stdin, stdout与stderr都指向屏幕输入,即字符界面终端。但在使用管道时,

stdin与stdout并不指向终端。例如:

program1 | program2 

program1的标准输出会作为program2的标准输入,整个过程不经过终端,因此在屏幕上看

不到program1的输出。

只有stderr一直指向终端。因此如果想保证输出到终端,就要使用stderr。

读取来自Pipeline的输入

读取来自于管道的输入,其实就是读取标准输入。下面代码回显Pipeline输入:

int main (int argc, char **argv)
{
    char buffer[64];
    int nActualRead = 0;

    while ( true )
    {
        nActualRead = fread( buffer, 1, 64-1, stdin );

        if ( nActualRead > 0 )
        {
            buffer[nActualRead] = ‘\0‘; 

            // Using stderr to make sure alway output to terminal.
            fprintf( stderr, "%s", buffer );
        }
        else
        {
            break;
        }
    }

    return 0;
}

xargs

xargs的功能是将输入内容拆分成若干记号,再作为下一个程序的命令行参数。

xargs的通常用法是:

program1 | xargs program2

如:

ls | xargs wc 

     29      82    1834 0059441.html
     37      83    1685 0059441.md
     66     165    3519 total

xargs分析来自于ls的输入,组合成命令行参数,传给wc并执行。

查看xargs分析组合后的结果:

ls | xargs
0059441.html 0059441.md

即,ls | xargs wc 相当于执行 wc 0059441.html 0059441.md

vim -

指示Vim接收管道的形式为 vim -

如:

ls | vim -

Vim将读取ls的输出,并当作其的缓冲内容。需要说明的是,”vim -“是Vim自定义的形式,

在其它命令中”-“并不能代表标准输入。

时间: 2024-08-07 12:31:55

Pipeline 与 xargs的相关文章

xargs 原理&使用

1. 简介 之所以能用到这个命令,是由于很多 linux 命令不支持用管道传递参数,例如 find /sbin -perm +700 | ls -l 这个命令是错误的 find /sbin -perm +700 |xargs ls -l   这样才是正确的 通常Linux命令可以用|首尾相连,上一个命令的 stdout 连接到下一个命令的 stdin.但是有些命令,比如ls.rm等,是从命令行参数接受输入的.这时候如果想把上一个命令的输出传给它们,就不好办了.所以就有了xargs. 简单而言,x

linux下xargs命令用法详解 【转】

xargs在linux中是个很有用的命令,它经常和其他命令组合起来使用,非常的灵活.xargs是给命令传递参数的一个过滤器,也是组合多个命令的一个工具.它把一个数据流分割为一些足够小的块,以方便过滤器和命令进行处理.由此 这个命令也是后置引用的一个强有力的替换.在一般使用过多参数的命令替换失败的时候,用xargs来替换它一般都能成功.通常情况下,xargs从管道或 者stdin中读取数据,但是它也能够从文件的输出中读取数据.xargs的默认命令是echo.这意味着通过管道传递给xargs的输入将

[持续交付实践] pipeline:pipeline 使用之快速入门

什么是pipeline 先介绍下什么是Jenkins 2.0,Jenkins 2.0的精髓是Pipeline as Code,是帮助Jenkins实现CI到CD转变的重要角色.什么是Pipeline,简单来说,就是一套运行于Jenkins上的工作流框架,将原本独立运行于单个或者多个节点的任务连接起来,实现单个任务难以完成的复杂发布流程.Pipeline的实现方式是一套Groovy DSL,任何发布流程都可以表述为一段Groovy脚本,并且Jenkins支持从代码库直接读取脚本,从而实现了Pipe

MongoDB 学习笔记之 Aggregation Pipeline实战实现inner join

 Aggregation Pipeline实战实现inner join: leftT集合: comments集合: 现在我们要用aggregation实现inner join db.comments.aggregate([{ $lookup: { from:"leftT", localField:"timestamp", foreignField:"timestamp", as: "timestampCol" }}, {$un

xargs的原理剖析及用法详解

http://www.cnblogs.com/f-ck-need-u/p/5925923.html 1,使用find 的exec选项去处理匹配到的选项时,find 一次性将匹配到得参数传给exec执行.但有的系统,对exec 传的参数长度有限制,这样在find 命令执行几分钟后会报溢出,错误信息通常是"参数列太长"或"参数列溢出". 2,xargs 与find 命令合用的时候,find 把匹配到得命令传递给xargs ,xargs 每次只获取一部分文件,而不是全部.

-exec和xargs的区别

-exec和xargs的区别 2010-11-27 星期六 晴朗 当你在命令行执行: $find . -name 'core' -type f -exec rm {} /; 时,find -exec 命令会对每个匹配的文件执行一个单独的rm操作(execute a separate rm for each one), 正如你手动敲入下面命令: rm ./bin/core rm ./source/shopping_cart/core rm ./backups/core ... 但是使用这种方式,如

xargs用法

http://m.blog.csdn.net/article/details?id=44875865 为啥要xargs? 通常linux命令可以用|首尾相连,上一个命令的 stdout 连接到下一个命令的 stdin.但是有些命令,比如ls.rm等,是从命令行参数接受输入的.这时候如果想把上一个命令的输出传给它们,就不好办了.所以就有了xargs. 简单而言,xargs可以把从 stdin 接受到的输入,用空白符分隔开,然后依次作为参数去调用xargs后面的命令. 用法 举个例子,想把所有.jp

使用beanstalkd实现定制化持续集成过程中pipeline - 持续集成系列

持续集成是一种项目管理和流程模型,依赖于团队中各个角色的配合.各个角色的意识和配合不是一朝一夕能练就的,我们的工作只是提供一种方案和能力,这就是持续集成能力的服务化.而在做持续集成能力服务化的过程中,最核心的一点就是,如何实现一个可定制化的任务流,即所谓的pipeline. 在传统的持续集成工具实现了pipeline功能,以供串联上下游job,并把多个job联系成一次完整的构建,例如jenkins的pipeline插件. 但是各种持续集成工具,或多或少都有自己的短板,总结起来如下: 1.配置并不

【转】【Linux】linux下xargs命令

xargs命令当前位置:首页 ? 软件·打印·开发·工具 ? xargs xargs命令常用工具命令 xargs命令是给其他命令传递参数的一个过滤器,也是组合多个命令的一个工具.它擅长将标准输入数据转换成命令行参数,xargs能够处理管道或者stdin并将其转换成特定命令的命令参数.xargs也可以将单行或多行文本输入转换为其他格式,例如多行变单行,单行变多行.xargs的默认命令是echo,空格是默认定界符.这意味着通过管道传递给xargs的输入将会包含换行和空白,不过通过xargs的处理,换