AWK（一）

曲吉福 • 2018-01-01 20:28 • Linux干货

本章内容:awk介绍;awk基本用法;awk变量;awk格式化;awk操作符;awk条件判断;awk循环;awk数组;awk函数;调用系统命令

1：AWK介绍

(一)awk：Aho, Weinberger, Kernighan，报告生成器，格式化文本输出 
有多种版本：New awk（nawk），GNU awk（ gawk） 
gawk：模式扫描和处理语言 
基本用法： awk [options] ‘program’ var=value file…
awk [options] -f programfile var=value file…
awk [options] ‘BEGIN{ action;… } pattern{ action;… } END{ action;… }’ file …
awk 程序通常由：BEGIN语句块、能够使用模式匹配的通用语句块、END语句块，共3部分组成 program通常是被单引号或双引号中
选项：
-F 指明输入时用到的字段分隔符
-v var=value: 自定义变量

AWK语言

（1）基本格式：awk [options] ‘program’ file…

（2）program:pattern{action statements;..}

（3）pattern和action：

pattern部分决定动作语句何时触发及触发事件
BEGIN,END

action statements对数据进行处理，放在{}内指明
print, printf

（4）分割符、域和记录

awk执行时，由分隔符分隔的字段（域）标记$1,$2..$n称为域标识。$0为所有域，注意：和shell中变量$符含义不同

文件的每一行称为记录

省略action，则默认执行 print $0 的操作

AWK工作原理

第一步：执行BEGIN{action;… }语句块中的语句

第二步：从文件或标准输入(stdin)读取一行，然后执行pattern{ action;… }语句块，它逐行扫描文件，从第一行到最后一行重复这个过程，直到文件全部被读取完毕。

第三步：当读至输入流末尾时，执行END{action;…}语句块

BEGIN语句块在awk开始从输入流中读取行之前被执行，这是一个可选的语句块，比如变量初始化、打印输出表格的表头等语句通常可以写在BEGIN语句块中

END语句块在awk从输入流中读取完所有的行之后即被执行，比如打印所有行的分析结果这类信息汇总都是在END语句块中完成，它也是一个可选语句块

pattern语句块中的通用命令是最重要的部分，也是可选的。如果没有提供pattern语句块，则默认执行{ print }，即打印每一个读取到的行，awk读取的每一行都会执行该语句块

2：AWK基本用法

print格式： print item1, item2, …

要点：

(1) 逗号分隔符

(2) 输出的各item可以字符串，也可以是数值；当前记录的字段、变量或awk的表达式

(3) 如省略item，相当于print $0

示例

awk ‘{print “hello,awk”}’

AWK（一）

awk –F”:” ‘{print}’ /etc/passwd

awk –F: ‘{print $1}’ /etc/passwd

awk –F: ‘{print $0}’ /etc/passwd

awk –F: ‘{print $1”\t”$3}’ /etc/passwd

AWK（一）

tail –3 /etc/fstab |awk ‘{print $2,$4}’

AWK（一）

3：AWK变量

变量：内置和自定义变量

FS：输入字段分隔符，默认为空白字符
awk -v FS=’:’ ‘{print $1,FS,$3}’ /etc/passwd

AWK（一）
awk –F: ‘{print $1,$3,$7}’ /etc/passwd

AWK（一）

OFS：输出字段分隔符，默认为空白字符

awk -v FS=‘:’ -v OFS=‘:’ ‘{print $1,$3,$7}’ /etc/passwd

AWK（一）

RS：输入记录分隔符，指定输入时的换行符
awk -v RS=’ ‘ ‘{print }’ /etc/passwd

AWK（一）

ORS：输出记录分隔符，输出时用指定符号代替换行
awk -v RS=’ ‘ -v ORS=’###’‘{print }’ /etc/passwd

AWK（一）

NF：字段数量
awk -F： ‘{print NF}’ /etc/passwd,引用内置变量不用$

AWK（一）
awk -F: ‘{print $(NF-1)}’ /etc/passwd

AWK（一）0

NR：记录号
awk ‘{print NR}’ /etc/fstab

AWK（一）

FNR：各文件分别计数,记录号
awk ‘{print FNR}’ /etc/fstab /etc/inittab

AWK（一）

FILENAME：当前文件名
awk ‘{print FILENAME,NR,$0}’ /etc/fstab

AWK（一）0

ARGC：命令行参数的个数
awk ‘{print ARGC}’ /etc/fstab /etc/inittab

AWK（一）0
awk ‘BEGIN {print ARGC}’ /etc/fstab /etc/inittab

ARGV：数组，保存的是命令行所给定的各参数
awk ‘BEGIN {print ARGV[0]}’ /etc/fstab /etc/inittab

代表第一个参数

awk ‘BEGIN {print ARGV[1]}’ /etc/fstab /etc/inittab

代表第二个参数

自定义变量(区分字符大小写)
(1) -v var=value
(2) 在program中直接定义

示例：
awk -v test=’hello gawk’ ‘{print test}’ /etc/fstab

AWK（一）

awk -v test=’hello gawk’ ‘BEGIN{print test, “is haha” }’

AWK（一）0

awk –F:‘{sex=“male”;print $1,sex,age;age=18}’ /etc/passwd

AWK（一）

调用文件

{sex=”male”;print $1,sex,age;age=18}

awk -F: -f abc.txt /etc/passwd

AWK（一）0

本文来自投稿，不代表Linux运维部落立场，如若转载，请注明出处：http://www.178linux.com/90758

赞 (0)

0

Shell编程if语句

上一篇 2018-01-01 20:27

awk 的相关知识

下一篇 2018-01-01

Linux干货

（一）Linux发行版及基础命令简述

计算机 Linux 发行版命令帮助

2017-12-11
08RPM的简单实用

rpm命令，安装（-i，–install）、卸载、升级（-U，-F）、查询（-q，–query）、校验（-V，–verify）、数据库维护安装：rpm {-i|–install} [install-options] PACKAGE_FILE… v：可视化 h：以#显示进度 rpm -ivh package_f…

Linux干货 2016-11-03
第10周作业(下)

4、写一个脚本(1) 能接受四个参数：start, stop, restart, statusstart: 输出“starting 脚本名 finished.”(2) 其它任意参数，均报错退出。 #!/bin/bash # [ $# -ne 1 ] && echo &quo…

Linux干货 2017-01-03
关于大型网站技术演进的思考（十四）–网站静态化处理—前后端分离—上（6）

原文出处：夏天的森林前文讲到了CSI技术，这就说明网站静态化技术的讲述已经推进到了浏览器端了即真正到了web前端的范畴了，而时下web前端技术的前沿之一就是前后端分离技术了，那么在这里网站静态化技术和前后端分离技术产生了交集，所以今天我将讨论下前后端分离技术，前后端分离技术讨论完后，下一篇文章我将会以网站静态化技术的角度回过头来…

Linux干货 2015-02-26
用户组和权限以及权限的分类

关于文件的安全我们要从3A验证说起 1 Authentication：认证 2 Authorization：授权 3 Accouting|Audition：审计由于系统文件的用户太多为了便于管理我们便把系统的用…

系统运维 2016-08-04
运维成长记

在学校里学到的是知识，而企业更看重的是技能和能力。我们需要把知识先转化为技能，然后实践中通过总结提升，转变为自己的能力。这个过程或许会很漫长，但是时间会证明一切。成长的过程注定是痛苦的，欲戴王冠，必承其重！我们有理由相信：运气也是实力的一部分！第一次接触linux还是在大学的课堂上，看着老师在物理机上用VM虚拟出一台Ubuntu的时候，真实感觉…

Linux干货 2017-07-11