百度360必应搜狗淘宝本站头条
python判断字典是否为空crontab每周一执行aes和des区别安装指定版本npmadb pull
当前位置：网站首页 > IT知识 > 正文

Linux awk 命令详解

liuian 2024-12-14 13:32 29 浏览

简介

awk 是 Linux 中强大的文本处理工具，广泛用于模式匹配扫描，数据提取，文本操作。

使用场景：

  • 解析日志文件
  • 汇总数据
  • 格式化文本输出
  • 从文件中提取指定的信息

历史

awk 由三个人共同创造的，以三个人的 last name 的首字母组成

  • Alfred V. Aho
  • Peter J. Weinberger
  • Brian W. Kernighan

基本语法

awk 'pattern { action }' file

# pattern 是匹配的模式，如正则表达式
# action 是匹配后进行的操作，如：打印，修改等
# file 要操作的文件，如果不指定文件，则从标准输入中读取

核心概念

记录和字段

  • 记录：文件中的每一行作为一个记录
  • 字段：字段是记录的一部分，通过指定的分隔符分割，默认的分隔符是空格，可以通过 -F 选项自定义分隔符

其中，$1，$2，lt;n> 等代表第几个字段

$NF 代表最后一个字段，$0 代表所有记录，即全部内容

abc def，其中 abc 是一个字段，def 是一个字段

模式

可以是正则表达式、数字比较、条件判断等

要执行的操作

定义在花括号 {} 里面

常用示例

打印所有行数据

awk '{ print $0 }' file

打印指定的字段

awk '{ print $1, $3 }' file

# 打印每行的第一个和第三个字段

打印模式匹配的行

awk '/error/ { print $0 }' file

# 打印包含 error 文本的行

使用条件表达式

awk '$3 > 50 { print $1, $2 }' file

# 当第三个字段大于50时打印第一个和第二个字段

使用范围比较表达式

awk 'NR >= 5 && NR <= 10 { print $0 }' file

# NR表示行号
# 以上表示打印第五到第十行的内容

自定义字段分隔符

awk -F ',' '{ print $1, $2 }' file

# 此处指定分隔符为逗号

内建变量

  • $0：所有记录/全部内容
  • $1，$1,...：第几个字段
  • NF：当前行的字段数
  • NR：行号
  • FS：字段分隔符
  • OFS：输出的字段分隔符
  • RS：记录分隔符/行分隔符，默认 \n
  • ORS：输出的记录分隔符/行分隔符

高级用法示例

打印行号

awk '{ print NR, $0 }' file

统计字段

awk '{ sum += $3 } END { print "Total:", sum }' file

# 统计每行第三个字段之和

替换字段

awk '{$2 = "REPLACED"; print $0 }' file

# 替换每行的第二个字段值为 REPLACED

打印模式匹配到的行数

awk '/pattern/ { count++ } END { print count }' file

格式化输出

awk '{ printf "Line %d: %s\n", NR, $0 }' file

通过管道处理标准输入

cat file | awk '{ print $1, $2 }'

awk命令写到脚本里复用

新建 script.awk 文件，写入以下内容：

{ print $1, $NF }

使用 -f 执行脚本文件

awk -f script.awk file

相关推荐

HR必备Excel函数:4个与日期相关的计算函数。

提到日期函数，很多人首先会想到“today”，它可以显示当天的日期，并且每次打开表格时都会自动更新。但是，对于前天、昨天、明天和后天的日期，就不能用yesterday或者tomorrow等这些英文了，...

这篇文章有点长，但可以让你十分钟玩转Excel的时间函数

日期与时间函数——TODAY、NOW、YEAR、MONTH、DAY！如何用WORKDAY函数查询距离某天的第20个工作日是哪一天？如何用NETWORKDAYS函数查询员工工作了多少个工作日？如何用WE...

Excel2020年日历套装，表格设计，农历显示，查阅套打轻松应用

Hello大家好，我是帮帮。今天跟大家分享一组Excel2020年日历套装，表格设计，自带农历控件，查阅套打轻松应用。有个好消息！为了方便大家更快的掌握技巧，寻找捷径。请大家点击文章末尾的“了解更多”...

巧用NETWORKDAYS函数计算两个日期之间工作日的天数

带有日期的单元格是我们日常使用EXCEL的时候经常见到的，有的时候我们需要求出两个日期之间间隔的天数，可以直接用结束日期减去开始日期即可，这是个非常简单的减法公式。不过这个单纯的减法公式会默认去掉开始...

Excel按工作日、休息日进行汇总

1、按周六日/其它时间汇总为了区分一周的周六日和其它时间，可以使用WEEKDAY函数，把WEEKDAY函数的第2个参数指定为2，如WEEKDAY(A3,2)，则周一返回1，周二返回2，…，周六返回...

如何计算每月应出勤天数，如有法定假期和调休，如何计算

本文介绍如何计算每月的应出勤天数。第一部分介绍正常双休制下计算应出勤天数；第二部份介绍当月有法定假期和调休的情况下计算应出勤天数。一、计算正常双休制的应出勤天数如下图所示，要求计算各员工2021年3月...

《Excel一键生成工作日历:让会议排期更轻松!》

每当需要安排会议时，总要翻看日历确认工作日，再逐个标注会议时间，既耗时又容易出错。今天教大家用Excel快速生成工作日历表，让会议排期变得简单高效！一、快速生成日历框架创建基础日期：在A1单元格输入月...

如何计算指定日期区间内，有多少工作日和休息日?

大家好，今天咱们要解决的问题是如何计算给定的一段日期内，正常工作日有多少天，放假时间有多少天？比如咱们要计算2025年3月份工作日一共有多少天，又有多少天放假，如下图所示：通过肉眼我们可以数清楚，20...

如何如何在表格中自动突出显示双休日?

现在不少人喜欢用Excel来制作备忘录或安排工作事项。在表格中输入日期后，可以使用条件格式突出显示双休日，避免在休息日安排了工作。具体方法是这样的：第1步：选择要设置条件格式的日期单元格区域；在“开始...

excel函数技巧:networkdays.intl判断节假日

如图，想知道6月的每一天是否是节假日，公式如下：=NETWORKDAYS.INTL(A2,A2,1,$E$2:$E$28)这个函数既可以判断当前日期（一参=二参）是否是周末及工作日（三参、四参）还可得...

仅需3步，让考勤表根据实际休息日，自动地填充颜色

Hello，大家好，之前跟大家分享了我们如何让考勤表根据单休与双休自动的填充颜色，最近有粉丝问到：能不能让考勤表根据实际的休息日自动的填充颜色呢？可以是可以，只不过因为牵扯到假期调休，我们每年的休息日...

5步搞定动态考勤表!标记节假日、调休日?Excel自动变色!

今天教你用「动态考勤表」一招解决所有问题！只需输入月份，自动变色、自动更新节假日，从此告别加班，效率翻倍！动态考勤表的优势：自动变色：节假日、双休日一键标记，颜色分明。一表多用：修改月份即可...

一起用python做个炫酷音乐播放器，想听啥随便搜

前言前段时间写的Python自制一款炫酷音乐播放器，有不少小伙伴私信我，对播放器提了不少改进建议，让我完善播放器的功能。今天音乐播放器2.0版本完成了，大家一起来看看是如何用python自制一款炫酷的...

用Python做个“冰墩墩雪容融”桌面部件(好玩又有趣)

桌面太单调？今天就带大家，一起用Python的PyQt5开发一个有趣的自定义桌面动画挂件，看看实现的动画挂件效果！下面，我们开始介绍这个自定义桌面动画挂件的制作过程。一、核心功能设计实现将动态图gif...

Python串口调试助手源码分享

以下是一个基于Python和PyQt5实现的串口调试助手示例，包含核心功能实现代码：pythonimportsysimportserialfromPyQt5.QtCoreimportQTim...

一周热门
最近发表
标签列表