您好,欢迎访问一九零五行业门户网

Linux awk命令使用详解

简单介绍一下,awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大,这是我们玩linux的必备基本功,若要对其身世有更详尽的了解,自行搜索即可。对于工具的知识,笔者尽量将每个知识点的简要说明,并给出实例。
简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。
用法: 
awk [options] 'scripts' file1,file2... 
awk [options] 'pattern {action}' file1,file2...
options是awk的支持的选项,譬如-f -v等; scripts是其处理脚本,包含模式pattern和动作action(模式和动作的关系一般为,模式负责确定有效字段,动作负责对其处理)
一、print的简单使用
创建一个简单的测试文件如下:
[root@mos download]# cat demo.txt
welcome to mos blog.
this is a test file.
例:打印整行: $0
[root@mos download]# awk '{print $0}' demo.txt
welcome to mos blog.
this is a test file.
例:打印每行的最后一个字段: $nf
[root@mos download]# awk '{print $nf}' demo.txt
blog.
file.
例:打印第二个字段: $2
[root@mos download]# awk '{print $2}' demo.txt
to
is
例:打印每行的倒数第二个字段,并在其后打印ok
[root@mos download]# awk '{print $(nf-1),ok}' demo.txt
mos ok
test ok
例:打印行号
[root@mos download]# awk '{print nr,$0}' demo.txt
1 welcome to mos blog.
2 this is a test file.
例:打印当前系统环境变量的某个特定值,譬如路径,下面俩输出一样
[root@mos download]# awk '{print environ[user];}' demo.txt
root
root
[root@mos download]# awk 'begin{print environ[path];}'
/usr/kerberos/sbin:/usr/kerberos/bin:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin
ps:后面的文件只是为了让print成功执行,begin是执行前可以输出的数据,常用作写为报告标题和测试输出,其内容不能获得与文件修改操作有关的变量,后面会说到;
例:awk的默认分隔符为空格,而有些文本字以其他字符为分隔符,以下两例相同
[root@mos download]# awk -f: {'print $1,$nf'} /etc/passwd|tail -1
mos1 /bin/bash
[root@mos download]# awk -v fs=: '{print $1,$nf}' /etc/passwd|head -1
root /bin/bash
例:修改输出分隔符号,特殊字符需转义,如下几例:
[root@mos download]# awk -v ofs=. '{print $1,$nf}' demo.txt
welcome.blog.
this.file.
[root@mos download]# awk -v ofs=~'{print $1,$nf}' demo.txt
welcome~blog.
this~file.
[root@mos download]# awk -v ofs=\ '{print $1,$nf}' demo.txt
welcomeblog.
thisfile.
[root@mos download]# awk -v ofs=9 '{print $1,$nf}' demo.txt
welcome9blog.
this9file.
[root@mos download]# awk -v ofs=xxxx '{print $1,$nf}' demo.txt
welcomexxxxblog.
thisxxxxfile.
ps: 若在print输出字段的之间不写逗号,则输出分隔符无效,输出的结果会直接连在一起
awk中有许多默认的变量,例如之前列出的:$1~$n、$0、fs、ofs等。下图为awk内置变量表:
属性 说明
$0 当前记录(作为单个变量)
$1~$n 当前记录的第n个字段,字段间由fs分隔
fs 输入字段分隔符 默认是空格
nf 当前记录中的字段个数,就是有多少列
nr 已经读出的记录数,就是行号,从1开始
rs 输入的记录他隔符默 认为换行符
ofs 输出字段分隔符 默认也是空格
ors 输出的记录分隔符,默认为换行符
argc 命令行参数个数
argv 命令行参数数组
filename 当前输入文件的名字
ignorecase 如果为真,则进行忽略大小写的匹配
argind 当前被处理文件的argv标志符
convfmt 数字转换格式 %.6g
environ unix环境变量
errno unix系统错误消息
fieldwidths 输入字段宽度的空白分隔字符串
fnr 当前记录数
ofmt 数字的输出格式 %.6g
rstart 被匹配函数匹配的字符串首
rlength 被匹配函数匹配的字符串长度
subsep \034
声明一下:由于许多变量笔者亦不怎么常用,因此笔者此处未全部列出。
更多linux awk命令使用详解。
其它类似信息

推荐信息