博客
关于我
linux--shell Awk
阅读量:587 次
发布时间:2019-03-11

本文共 1247 字,大约阅读时间需要 4 分钟。

Awk

Awk是一种强大的文本处理语言,最初于1977年由Alfred Aho、Peter Weinberger和Brian Kernighan发明。它的名字是三位开发者姓氏的首字母缩写(Aho、Weinberger、Kernighan)。Awk主要用于Linux/Unix环境下的文本扫描和处理,能处理标准输入、文件和管道数据。尽管有许多Awk的不同版本,如awk、nawk、gawk、MKS awk等,但在Linux中最常用的有gawk和mawk。而Ubuntu等系统默认使用mawk,RHEL则使用gawk。

Awk的工作流程是逐行扫描文件,从第一行到最后一行。它会将每一行与给定的模式进行匹配,如果匹配成功,则执行指定的处理动作。此外,Awk支持两个特殊模式BEGIN和END,分别用于在数据处理之前和之后执行。

Awk的语法基础

Awk程序的基本结构包括模式和动作,格式为pattern {action}。默认情况下,如果不指定模式,Awk会匹配所有数据,默认的处理动作是print。

Awk的命令行选项包括:

-
-F fs:指定字段分隔符,默认为空格或制表符。 -
-v var=val:在处理动作之前设置变量。 -
-f program-file:使用 脚本文件 来指定处理指令。

Awk的常用操作指令

1. 读取记录并分割字段

awk '{print $1,$2,$3}':输出记录的第1、2、3个字段。
awk '{print $NF}':输出记录的最后一个字段。
awk -F:a '{print $NF}':更改分隔符为 colon(+:),然后输出最后一个字段。

2. 应用正则表达式匹配

awk '/^$/' filename:匹配空行并打印。
awk '/anaconda/' filename:匹配包含“anaconda”的行并打印。

3. 字段操作和内置变量

FS:字段分隔符。
OFS:输出字段分隔符,默认为空格。
ORS:输出记录分隔符,默认为换行符。
NR:输入流的记录编号。
NF:记录的字段个数。

4. gsub和sub函数

gsub:在字符串中替换正则表达式匹配的所有实例。
sub:替换第一个匹配项。

Awk的高级应用

1. 条件判断

if语法格式:
if(表达式) {动作},若表达式为真,执行后续动作。

2. 循环语句

Awk支持whiledo循环,以及for循环。

while循环:用于重复执行某个动作直到条件满足。
do循环:执行预先定义的动作后再检查条件。

3. 数组和函数

数组:可以使用
a[$key]表示数组,
for循环通过变量遍历数组元素。
函数:Awk支持内置函数如
rand(生成随机数)、
gsub
getline(读取文本行)。

4. 统计空白行数

awk '/^$/{count++}' filename:统计并打印空白行数。
awk '/^$/{print count++}' END:在批处理完成后打印总数。

转载地址:http://ipztz.baihongyu.com/

你可能感兴趣的文章
Openlayers实战:绘制多边形,导出CSV文件
查看>>
Openlayers实战:绘制带箭头的线
查看>>
Openlayers实战:输入WKT数据,输出GML、Polyline、GeoJSON格式数据
查看>>
Openlayers实战:非4326,3857的投影
查看>>
Openlayers高级交互(10/20):绘制矩形,截取对应部分的地图并保存
查看>>
Openlayers高级交互(11/20):显示带箭头的线段轨迹,箭头居中
查看>>
Openlayers高级交互(14/20):汽车移动轨迹动画(开始、暂停、结束)
查看>>
Openlayers高级交互(15/20):显示海量多边形,10ms加载完成
查看>>
Openlayers高级交互(16/20):两个多边形的交集、差集、并集处理
查看>>
Openlayers高级交互(17/20):通过坐标显示多边形,计算出最大幅宽
查看>>
Openlayers高级交互(19/20): 地图上点击某处,列表中显示对应位置
查看>>
Openlayers高级交互(2/20):清除所有图层的有效方法
查看>>
Openlayers高级交互(20/20):超级数据聚合,页面不再混乱
查看>>
Openlayers高级交互(3/20):动态添加 layer 到 layerGroup,并动态删除
查看>>
Openlayers高级交互(4/20):手绘多边形,导出KML文件,可以自定义name和style
查看>>
Openlayers高级交互(5/20):右键点击,获取该点下多个图层的feature信息
查看>>
Openlayers高级交互(6/20):绘制某点,判断它是否在一个电子围栏内
查看>>
Openlayers高级交互(7/20):点击某点弹出窗口,自动播放视频
查看>>
Openlayers高级交互(8/20):选取feature,平移feature
查看>>
Openlayers:DMS-DD坐标形式互相转换
查看>>