UNIX_ Perl之单行命令特技

转自:superdebug.blog.chinaunix.net

替换

将所有C程序中的foo替换成bar,旧文件备份成.bak

perl -p -i.bak -e ‘s/\bfoo\b/bar/g‘ *.c

很强大的功能,特别是在大程序中做重构。记得只有在UltraEdit用过。 如果你不想备份,就直接写成 perl -p -i -e 或者更简单 perl -pie, 恩,pie这个单词不错

将每个文件中出现的数值都加一

perl -i.bak -pe ‘s/(\d+)/ 1 + $1 /ge‘ file1 file2 ....

将换行符\r\n替换成\n

perl -pie ‘s/\r\n/\n/g‘ file

同dos2unix命令。

将换行符\n替换成\r\n

perl -pie ‘s/\n/\r\n/g‘ file

同unix2dos命令。

取出文件的一部分

显示字段0-4和字段6,字段的分隔符是空格

perl -lane ‘print "@F[0..4] $F[6]"‘ file

很好很强大,同 awk ‘print $1, $2, $3, $4, $5, $7‘。参数名称lane也很好记。

如果字段分隔符不是空格而是冒号,则用

perl -F: -lane ‘print "@F[0..4]\n"‘ /etc/passwd

显示START和END之间的部分

perl -ne ‘print if /^START$/ .. /^END$/‘ file

恐怕这个操作只有sed才做得到了吧……

相反,不显示START和END之间的部分

perl -ne ‘print unless /^START$/ .. /^END$/‘ file

显示开头50行:

perl -pe ‘exit if $. > 50‘ file

同命令 head -n 50

不显示开头10行:

perl -ne ‘print unless 1 .. 10‘ file

显示15行到17行:

perl -ne ‘print if 15 .. 17‘ file

每行取前80个字符:

perl -lne ‘print substr($_, 0, 80) = ""‘ file

每行丢弃前10个字符:

perl -lne ‘print substr($_, 10) = ""‘ file

搜索

查找comment字符串:

perl -ne ‘print if /comment/‘ duptext

这个就是普通的grep命令了。

查找不含comment字符串的行:

perl -ne ‘print unless /comment/‘ duptext

反向的grep,即grep -v。

查找包含comment或apple的行:

perl -ne ‘print if /comment/ || /apple/‘ duptext

相同的功能就要用到egrep了,语法比较复杂,我不会……

计算

计算字段4和倒数第二字段之和:

perl -lane ‘print $F[4] + $F[-2]‘

要是用awk,就得写成 awk ‘{i=NF-1;print $5+$i}‘

排序和反转

文件按行排序:

perl -e ‘print sort <>‘ file

相当于简单的sort命令。

文件按段落排序:

perl -00 -e ‘print sort <>‘ file

多个文件按文件内容排序,并返回合并后的文件:

perl -0777 -e ‘print sort <>‘ file1 file2

文件按行反转:

perl -e ‘print reverse <>‘ file1

相应的命令有吗?有……不过挺偏,tac(cat的反转)

数值计算

10进制转16进制:

perl -ne ‘printf "%x\n",$_‘

10进制转8进制: perl -ne ‘printf "%o\n",$_‘

16进制转10进制:

perl -ne ‘print hex($_)."\n"‘

8进制转10进制:

perl -ne ‘print oct($_)."\n"‘

简易计算器。

perl -ne ‘print eval($_)."\n"‘

其他

启动交互式perl:

perl -de 1

查看包含路径的内容:

perl -le ‘print for @INC‘

备注

与One-Liner相关的Perl命令行参数:

-0<数字> (用8进制表示)指定记录分隔符($/变量),默认为换行 -00 段落模式,即以连续换行为分隔符 -0777 禁用分隔符,即将整个文件作为一个记录 -a 自动分隔模式,用空格分隔$_并保存到@F中。相当于@F = split ‘‘。分隔符可以使用-F参数指定 -F 指定-a的分隔符,可以使用正则表达式 -e 执行指定的脚本。 -i<扩展名> 原地替换文件,并将旧文件用指定的扩展名备份。不指定扩展名则不备份。 -l 对输入内容自动chomp,对输出内容自动添加换行 -n 自动循环,相当于 while(<>) { 脚本; } -p 自动循环+自动输出,相当于 while(<>) { 脚本; print; }

1-->显示历史命令使用频率

[email protected]:~$ history | perl -F"\||<\(|;|\`|\\$\(" -alne ‘foreach (@F) { print $1 if /\b((?!do)[a-z]+)\b/i }‘ | sort | uniq -c | sort -nr
    169 ls
     98 vim
     90 python
     27 man

2-->将每个文件中出现的数值都加一

perl -i.bak -pe ‘s/(\d+)/ 1 + $1 /ge‘ file1 file2 ....

[email protected]:~$ cat ptt1.txt
204.108.13.15 abc [] ServerPath=/home/html/pics 62ms
214.92.113.13 xxx [code=5] ServerPath=/home/html/pages 32ms

[email protected]:~$ perl -i.bak -pe ‘s/(\d+)/ 1 + $1 /ge‘ ptt1.txt    

匹配servrerpath后的字符并打印出来

[email protected]:~$ perl -ne  ‘print "$1\n" if  /ServerPath=(\S+)/g‘ ptt1.txt
/home/html/pics
/home/html/pages

 3-->查看包含路径的内容:

perl -le ‘print for @INC‘

4-->取出文件的一部分

显示字段0-4和字段6,字段的分隔符是空格

perl -lane ‘print "@F[0..4] $F[6]"‘ file

很好很强大,同 awk ‘print $1, $2, $3, $4, $5, $7′。参数名称lane也很好记。

如果字段分隔符不是空格而是冒号,则用

perl -F: -lane ‘print "@F[0..4]\n"‘ /etc/passwd

显示START和END之间的部分

perl -ne ‘print if /^START$/ .. /^END$/‘ file

恐怕这个操作只有sed才做得到了吧……

相反,不显示START和END之间的部分

perl -ne ‘print unless /^START$/ .. /^END$/‘ file

显示开头50行:

perl -pe ‘exit if $. > 50‘ file

同命令 head -n 50

不显示开头10行:

perl -ne ‘print unless 1 .. 10‘ file

显示15行到17行:

perl -ne ‘print if 15 .. 17‘ file

每行取前80个字符:

perl -lne ‘print substr($_, 0, 80) = ""‘ file

每行丢弃前10个字符:

perl -lne ‘print substr($_, 10) = ""‘ file

5-->准备关键词测试时经常需要进行UrlEncode和UrlDecode

以下是2个常用的单行Perl脚本(正则表达式):输入为日志或关键词列表

Urlencode:对 \n 不转码

perl -p -e ‘s/([^\w\-\.\@])/$1 eq "\n" ? "\n":sprintf("%%%2.2x",ord($1))/eg‘ keywords.list

UrlDecode:

perl -p -e ‘s/%(..)/pack("c", hex($1))/eg‘ query.log

备注

与One-Liner相关的Perl命令行参数

-0<数字>
    (用8进制表示)指定记录分隔符($/变量),默认为换行
-00
    段落模式,即以连续换行为分隔符
-0777
    禁用分隔符,即将整个文件作为一个记录
-a
    自动分隔模式,用空格分隔$_并保存到@F中。相当于@F = split ”。分隔符可以使用-F参数指定
-F
    指定-a的分隔符,可以使用正则表达式
-e
    执行指定的脚本。
-i<扩展名>
    原地替换文件,并将旧文件用指定的扩展名备份。不指定扩展名则不备份。
-l
    对输入内容自动chomp,对输出内容自动添加换行
-n
    自动循环,相当于 while(<>) { 脚本; }
-p
    自动循环+自动输出,相当于 while(<>) { 脚本; print; }

时间: 2024-10-29 19:07:47

UNIX_ Perl之单行命令特技的相关文章

awk,perl,python的命令行参数处理

Python,Perl,Bash命令行参数 Part I 日常经常性的和Perl,Python,Bash打交道,但是又经常性的搞混他们之间,在命令行上的特殊性和index的区别,Python真的是人性化到家了,但是命令行上就很原始,但是很有分类感.还是会喜欢Perl一点(至少还可以动脑子,不至于生锈),感觉Perl是个杂合子,而python像胡彦斌,bash像韩红(最近看我是歌手第三季,嘻嘻).Bash就是家常菜了,虽然Perl可以大部分代替Bash的功能,像grep sort map等,但是某

10 个最酷的 Linux 单行命令

下面是来自 Commandlinefu 网站由用户投票决出的 10 个最酷的 Linux 单行命令,希望对你有用. 1. sudo !! 以 root 帐户执行上一条命令. 2. python -m SimpleHTTPServer 利用 Python 搭建一个简单的 Web 服务器,可通过 http://$HOSTNAME:8000 访问. 3. :w !sudo tee % 在 Vim 中无需权限保存编辑的文件. 4. cd - 更改到上一次访问的目录. 5. ^foo^bar 将上一条命令

[源码]perl执行dos命令 执行cmd命令并输出cgi页面

perl执行dos命令 执行cmd命令并输出cgi页面 2014-08-31 01:30:13| 分类: Perl |举报 |字号 订阅 #!c:/Perl/bin/perl.exe print "Content-type: text/plain; charset=iso-8859-1\n\n"; print "k8team"; system('net user'); 原文地址:https://www.cnblogs.com/k8gege/p/10585702.ht

python -c 执行单行命令/脚本,有点意思

python -c参数,支持执行单行命令/脚本.例: > python -c "import os;print('hello'),print('world')" > python -c "import os;print('hello');print('world')" 注意:要用双引号将命令包起来,import要以**;结尾,命令用[]括起来,多行命令用多个[]** > python -c "import os,time;[print(i

Perl调用外部命令的方式和区别

主要的方式简述如下:1. system("command");使用该命令将开启一个子进程执行引号中的命令,父进程将等待子进程结束并继续执行下面的代码. 2. exec("command");效果同system命令类似,区别是不会开启子进程,而是取代父进程,因此执行完引号中的命令后进程即结束.一般和fork配合使用. 3. `command`;使用反引号调用外部命令能够捕获其标准输出,并按行返回且每行结束处附带一个回车.反引号中的变量在编译时会被内插为其值. 4. o

perl 常用管理命令

#主要记录工作中经常使用的perl管理命令 安装第三方模块: yum install cpan cpan $module_name 查看已安装的模块: 第一种方法>> perldoc -t perllocal|grep "Module" 第二种方法>> cpan ExtUtils::Installed instmodsh #输入l 可查看到当前已经安装的所有模块 #cpan网址:https://metacpan.org/

Perl调用外部命令(其他脚本、系统命令)的方法和区别

1. `command`; 使用反引号调用外部命令能够捕获其标准输出,并按行返回且每行结束处附带一个回车.反引号中的变量在编译时会被内插为其值. 2. open LIST "ls -l|";    open MORE "|more";    @list=<LIST>;    print MORE @list;    close(LIST);    close(MORE);使用带管道的文件句柄来执行外部命令,使用方式与读写文件类似.可以从外部命令的输出读取

Perl去重fasta序列

常规方法 #! usr/bin/perl -w use strict; my $input=shift; my %hash; open IN,"<$input"; $/=">"; while(<IN>){ chomp; $hash{$_}=1; } foreach my $key(keys %hash){ print ">$key"; } close IN; Bioseq模块方法 #!/usr/bin/perl us

docker常用命令

1. 查看docker信息(version.info) 查看docker版本 docker version 显示docker系统的信息 docker info 2. 对image的操作(search.pull.images.rmi.history) 检索image docker search image_name 下载image docker pull image_name 列出镜像列表; -a, --all=false Show all images; --no-trunc=false Don