详解Linux中的awk命令
简介
awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。
awk有3个不同版本:awk、nawk和gawk,未作特别说明,一般指gawk,gawk是AWK的GNU版本。
awk其名称得自于它的创始人AlfredAho、PeterWeinberger和BrianKernighan姓氏的首个字母。实际上AWK的确拥有自己的语言:AWK程序设计语言,三位创建者已将它正式定义为“样式扫描和处理语言”。它允许您创建简短的程序,这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表,还有无数其他的功能。
一、选项参数说明
awk是一种处理文本文件的语言,我们可以使用awk--help查看一下它的选项参数,如下:
二、基本用法
1、行匹配语句,此处awk后只能跟单引号,格式如下:
awk'{匹配的内容}'匹配的文件名称
例如:
现有如下测试文件test:
使用如下命令输出文中每行的1、4项内容:
awk'{print$1,$4}'test
也可以添加如下内容使其格式化输出:
awk'{printf"%-8s%-10s\n",$1,$4}'test
2、指定分隔符
awk'{printf"%-8s%-10s\n",$1,$4}'test
例如:
有如下test文件:
执行如下命令,使用逗号分割输出每行的第一、二项内容:
awk-F,'{print$1,$2}'test
也可以使用内建变量,格式如下:
awk'BEGIN{FS=","}{print$1,$2}'test
对于使用多个分隔符,首先使用空格分割,然后再使用其他分割符进行分割:
awk-F'[,]''{print$1,$2,$4}'test
3、设置变量
awk-v
例如:
现有如下数据:
执行如下命令,每行第一项加1:
awk-va=1'{print$1,$1+a}'test
也可以使用如下命令设置多个变量:
awk-va=1-vb=s'{print$1,$1+a,$1b}'test
4、通过awk脚本来运行awk命令
awk-fawk脚本文件名
例如:
awk-ffile.awktest
三、运算符
例如:
1、过滤第一列大于2的行
awk'$1>2'test
2、过滤等于2的列
awk'$1==2{print$1,$3}'test
3、过滤第一列大于2并且第二列等于Are的行
awk'$1>2&&$2=="Are"{print$1,$2,$3}'test
四、内建变量
例如:
awk'BEGIN{printf"%4s%4s%4s%4s%4s%4s%4s%4s%4s\n","FILENAME","ARGC","FNR","FS","NF","NR","OFS","ORS","RS";printf"---------------------------------------------\n"}{printf"%4s%4s%4s%4s%4s%4s%4s%4s%4s\n",FILENAME,ARGC,FNR,FS,NF,NR,OFS,ORS,RS}'test
awk-F\''BEGIN{printf"%4s%4s%4s%4s%4s%4s%4s%4s%4s\n","FILENAME","ARGC","FNR","FS","NF","NR","OFS","ORS","RS";printf"---------------------------------------------\n"}{printf"%4s%4s%4s%4s%4s%4s%4s%4s%4s\n",FILENAME,ARGC,FNR,FS,NF,NR,OFS,ORS,RS}'test
awk'{printNR,FNR,$1,$2,$3}'test
awk'{print$1,$2,$5}'OFS="$"test
五、使用正则,字符串匹配
例如:
1、输出第二列包含“th”并打印第二列与第四列。
awk'$2~/th/{print$2,$4}'test
~表示模式开始,//中存放匹配的模式。
2、输出包含“re”的行
awk'/re/'test
六、忽略大小写
awk'BEGIN{IGNORECASE=1}/this/'test
七、模式取反
awk'$2!~/th/{print$2,$4}'test
awk'!/th/{print$2,$4}'test
八、awk脚本
关于awk脚本,需要注意BEGIN和END两个关键词:
(1)BEGIN{存放执行前的语句};
(2)END{存放处理完所有的行后要执行的语句}。
例如:
现有数据如下:
我们的awk脚本内容如下:
执行结果如下:
总结
以上所述是小编给大家介绍的Linux中的awk命令,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对毛票票网站的支持!
如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!
声明:本文内容来源于网络,版权归原作者所有,内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:czq8825#qq.com(发邮件时,请将#更换为@)进行举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。