linux shell的awk命令用法

文章目录

awk是linux中非常强大的文本分析工具。简单来说,awk就是把文件逐行的读入,以空格为默认分隔符将每行分割,分割的部分再进行各种分析处理。

awk的基本用法

awk的基本用法如下:

1
awk  [-F  field-separator] 'commands'  input-file(s)

其中,commands 是真正awk命令,[-F 域分隔符]是可选的。 input-file(s) 是待处理的文件。在awk中,文件的每一行中,由域分隔符分开的每一项称为一个域。通常,在不指名-F 域分隔符的情况下,默认的域分隔符是空格。

commands的具体形式为{pattern + action},即模式加动作,awk的具体形式可表示为:

1
awk  [-F  field-separator] '{pattern + action}' {filenames}

其中 pattern 表示 AWK 在数据中查找的内容,而 action 是在找到匹配内容时所执行的一系列命令。花括号({})不需要在程序中始终出现,但它们用于根据特定的模式对一系列指令进行分组。 pattern就是要表示的正则表达式,用斜杠括起来。

通常,awk是以文件的一行为处理单位的。awk每接收文件的一行,然后执行相应的命令,来处理文本。

awk的使用示例

以/etc/passwd文件为例进行讲解,当执行cat /etc/passwd命令时,会得到如下内容,这里只取前4行

1
2
3
4
5
# cat /etc/passwd
root:x:0:0:root:/root:/bin/bash
daemon:x:1:1:daemon:/usr/sbin:/bin/sh
bin:x:2:2:bin:/bin:/bin/sh
sys:x:3:3:sys:/dev:/bin/sh

1、awk+action用法

我们利用awk命令取出账户名,得到如下输出

1
2
3
4
5
#cat /etc/passwd |awk  -F ':'  '{print $1}'  
root
daemon
bin
sys

解释上述awk命令的含义:读入有’\n’换行符分割的一条记录(逐行读入),然后将记录按指定的域分隔符划分域(-F指定域分隔符为’:'),执行命令(print $1),$0则表示所有域,$1表示第一个域,$n表示第n个域。默认域分隔符是”空白键” 或 “[tab]键”,所以$1表示用户名,后面的以此类推。

因此如果要同时打印/etc/passwd的账户和账户对应的shell,并用逗号分割,可以使用如下命令

1
2
3
4
5
# cat /etc/passwd |awk  -F ':'  '{print $1","$7}'
root,/bin/bash
daemon,/bin/sh
bin,/bin/sh
sys,/bin/sh

2、awk+pattern用法

搜索/etc/passwd有root关键字的所有行

1
2
#awk -F: '/root/' /etc/passwd
root:x:0:0:root:/root:/bin/bash

这种是pattern的使用示例,匹配了pattern(这里是root)的行才会执行action(没有指定action,默认输出每行的内容)。
匹配模式一般在写法是/pattern/,即

1
awk '/pattern/'

搜索支持正则,例如找root开头的: awk -F: ‘/^root/’ /etc/passwd

3、awk+pattern+action用法

搜索/etc/passwd有root关键字的所有行,并显示对应的shell

1
2
# awk -F: '/root/{print $7}' /etc/passwd             
/bin/bash

这里指定了action{print $7}

awk的的扩展用法

1、awk内置变量

1
2
3
4
5
6
7
8
9
10
11
ARGC               命令行参数个数
ARGV               命令行参数排列
ENVIRON            支持队列中系统环境变量的使用
FILENAME           awk浏览的文件名
FNR                浏览文件的记录数
FS                 设置输入域分隔符,等价于命令行 -F选项
NF                 浏览记录的域的个数
NR                 已读的记录数
OFS                输出域分隔符
ORS                输出记录分隔符
RS                 控制记录分隔符

下面介绍一些简单的用法:
1、输出文件第二行

1
awk 'NR==2'

2、输出文件第二行到第四行

1
awk 'NR==2,NR==4'

3、删除所有的空行

1
awk NF

4、输出文件的最后一行

1
awk 'END { print }'

2、print和printf

awk中同时提供了print和printf两种打印输出的函数。

其中print函数的参数可以是变量、数值或者字符串。字符串必须用双引号引用,参数用逗号分隔。如果没有逗号,参数就串联在一起而无法区分。这里,逗号的作用与输出文件的分隔符的作用是一样的,只是后者是空格而已。

printf函数,其用法和c语言中printf基本相似,可以格式化字符串,输出复杂时,printf更加好用,代码更易懂。

参考文章:linux awk命令详解

本文出自 TENNFY博客,转载时请注明出处及相应链接。

本文永久链接: https://www.tennfy.com/3027.html

下一篇文章:

上一篇文章:

发表评论

电子邮件地址不会被公开。 必填项已用 * 标注

*

0 + 0 = ?


您可以使用这些 HTML 标签和属性: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>

返回顶部