Linux系统中文本分析工具awk的用法

今天小编要跟大家分享的文章是关于Linux系统中文本分析工具awk的用法。awk 是用于 Unix 和类 Unix 系统的强大文本解析工具,但是由于它有可编程函数,因此你可以用它来执行常规解析任务,因此它也被视为一种编程语言。你可能不会使用 awk 开发下一个 GUI 应用,并且它可能不会代替你的默认脚本语言,但是它是用于特定任务的强大程序。Linux入门新手和正在Linux学习的小伙伴快来看一看吧,希望能够对大家有所帮助 !

Linux系统中文本分析工具awk的用法

这些任务或许是惊人的多样化。了解 awk 可以解决你的哪些问题的最好方法是学习 awk。你会惊讶于 awk 如何帮助你完成更多工作,却花费更少的精力。下面我们就一起来看一看awk的用法吧!

一、awk 的基本语法是:

1. awk [options] ‘pattern {action}’ file

首先,创建此示例文件并将其保存为 colours.txt。

1. name color amount

2. apple red 4

3. banana yellow 6

4. strawberry red 3

5. grape purple 10

6. apple green 8

7. plum purple 2

8. kiwi brown 4

9. potato brown 9

10. pineapple yellow 5

数据被一个或多个空格分隔为列。以某种方式组织要分析的数据是很常见的。它不一定总是由空格分隔的列,甚至可以不是逗号或分号,但尤其是在日志文件或数据转储中,通常有一个可预测的格式。你可以使用数据格式来帮助 awk 提取和处理你关注的数据。

二、打印列

在 awk 中,print 函数显示你指定的内容。你可以使用许多预定义的变量,但是最常见的是文本文件中以整数命名的列。试试看:

1. $ awk ‘{print $2;}’ colours.txt

2. color

3. red

4. yellow

5. red

6. purple

7. green

8. purple

9. brown

10. brown

11. yellow

在这里,awk 显示第二列,用 $2 表示。这是相对直观的,因此你可能会猜测 print $1 显示第一列,而 print $3 显示第三列,依此类推。

要显示全部列,请使用 $0。

美元符号($)后的数字是表达式,因此 $2 和 $(1+1) 是同一意思。

三、有条件地选择列

你使用的示例文件非常结构化。它有一行充当标题,并且各列直接相互关联。通过定义条件,你可以限定 awk 在找到此数据时返回的内容。例如,要查看第二列中与 yellow 匹配的项并打印第一列的内容:

1. awk ‘$2==”yellow”{print $1}’ file1.txt

2. banana

3. pineapple

正则表达式也可以工作。此表达式近似匹配 $2 中以 p 开头跟上任意数量(一个或多个)字符后继续跟上 p 的值:

1. $ awk ‘$2 ~ /p.+p/ {print $0}’ colours.txt

2. grape purple 10

3. plum purple 2

数字能被 awk 自然解释。例如,要打印第三列包含大于 5 的整数的行:

1. awk ‘$3>5 {print $1, $2}’ colours.txt

2. name color

3. banana yellow

4. grape purple

5. apple green

6. potato brown

四、字段分隔符

默认情况下,awk 使用空格作为字段分隔符。但是,并非所有文本文件都使用空格来定义字段。例如,用以下内容创建一个名为 colours.csv 的文件:

1. name,color,amount

2. apple,red,4

3. banana,yellow,6

4. strawberry,red,3

5. grape,purple,10

6. apple,green,8

7. plum,purple,2

8. kiwi,brown,4

9. potato,brown,9

10. pineapple,yellow,5

只要你指定将哪个字符用作命令中的字段分隔符,awk 就能以完全相同的方式处理数据。使用 –field-separator(或简称为 -F)选项来定义分隔符:

1. $ awk -F”,” ‘$2==”yellow” {print $1}’ file1.csv

2. banana

3. pineapple

五、保存输出

使用输出重定向,你可以将结果写入文件。例如:

1. $ awk -F, ‘$3>5 {print $1, $2} colours.csv > output.txt

这将创建一个包含 awk 查询内容的文件。

你还可以将文件拆分为按列数据分组的多个文件。例如,如果要根据每行显示的颜色将 colours.txt 拆分为多个文件,你可以在 awk 中包含重定向语句来重定向每条查询:

1. $ awk ‘{print > $2″.txt”}’ colours.txt

这将生成名为 yellow.txt、red.txt 等文件。

以上就是小编今天为大家分享的关于Linux系统中文本分析工具awk的用法的文章,希望本篇文章能够对正在从事Linux相关工作的小伙伴们有所帮助,想要了解更多Linux相关知识记得关注马哥教育官网。

本文改编自社区技术播客 Hacker Public Radio。

via: https://opensource.com/article/19/10/intro-awk

作者:Seth Kenlon 选题:lujun9972 译者:geekpi 校对:wxy

本文由 LCTT 原创编译,Linux中国 推出

【免责声明:本文图片及文字信息均由小编转载自网络,旨在分享提供阅读,版权归原作者所有,如有侵权请联系我们进行删除。】

相关新闻

联系我们

400-080-6560

在线咨询:点击这里给我发消息

邮件:work@magedu.com

工作时间:周一至周日,09:00-18:30

QR code