百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

Linux 三剑客 awk 还有哪些高级用法?

liuian 2025-04-08 16:04 17 浏览

awk 是 Linux 中强大的文本处理工具,除了基本用法外,还有许多高级功能。以下是一些常见的高级用法:

awk

1.使用内置变量

awk 提供了多个内置变量,如 NR(当前记录号)、NF(当前记录的字段数)、FS(字段分隔符)等。

  • 示例:打印文件行号及内容
awk '{print NR, $0}' file.txt
  • 示例:打印每行的最后一个字段
awk '{print $NF}' file.txt

2.自定义字段分隔符

通过 -F 选项或 FS 变量,可以指定字段分隔符。

  • 示例:使用逗号作为分隔符
awk -F, '{print $1, $2}' file.csv
  • 示例:在脚本中设置分隔符
awk 'BEGIN {FS=","} {print $1, $2}' file.csv

3.使用条件语句

awk 支持 if-else 等条件语句,用于根据条件处理数据。

  • 示例:打印第一字段大于 10 的行
awk '{if ($1 > 10) print $0}' file.txt
  • 示例:根据条件输出不同内容
awk '{if ($1 > 10) print "High"; else print "Low"}' file.txt

4.使用循环

awk 支持 forwhile 循环,适合处理数组或重复操作。

  • 示例:打印每行的所有字段
awk '{for (i=1; i<=NF; i++) print $i}' file.txt
  • 示例:计算字段总和
awk '{sum=0; for (i=1; i<=NF; i++) sum+=$i; print sum}' file.txt

5.使用数组

awk 支持关联数组,适合统计和分组操作。

  • 示例:统计字段出现次数
awk '{count[$1]++} END {for (item in count) print item, count[item]}' file.txt
  • 示例:按字段分组求和
awk '{sum[$1]+=$2} END {for (item in sum) print item, sum[item]}' file.txt

6.使用内置函数

awk 提供了多种内置函数,如 lengthsubstrgsub 等。

  • 示例:计算每行长度
awk '{print length($0)}' file.txt
  • 示例:替换字符串
awk '{gsub(/foo/, "bar"); print $0}' file.txt

7.多文件处理

awk 可以同时处理多个文件,通过 FILENAME 变量获取当前文件名。

  • 示例:打印文件名及内容
awk '{print FILENAME, $0}' file1.txt file2.txt

8.BEGIN 和 END 块

BEGINEND 块分别用于在处理前后执行操作。

  • 示例:打印开始和结束信息
awk 'BEGIN {print "Start"} {print $0} END {print "End"}' file.txt
  • 示例:计算总和
awk '{sum+=$1} END {print sum}' file.txt

9.输出重定向

awk 支持将输出重定向到文件。

  • 示例:将输出写入文件
awk '{print $0 > "output.txt"}' file.txt

10.使用正则表达式

awk 支持正则表达式匹配。

  • 示例:匹配包含 "error" 的行
awk '/error/ {print $0}' file.txt
  • 示例:匹配以数字开头的行
awk '/^[0-9]/ {print $0}' file.txt

11.多行记录处理

通过设置 RS(记录分隔符),可以处理多行记录。

  • 示例:处理以空行分隔的多行记录
awk 'BEGIN {RS=""; FS="\n"} {print $1, $2}' file.txt

12.自定义输出格式

使用 printf 可以格式化输出。

  • 示例:格式化输出
awk '{printf "Name: %-10s Age: %d\n", $1, $2}' file.txt

13.处理命令行参数

通过 ARGCARGV 可以访问命令行参数。

  • 示例:打印命令行参数
awk 'BEGIN {for (i=0; i<ARGC; i++) print ARGV[i]}' file1.txt file2.txt

14.使用 getline 读取额外行

getline 用于读取额外行,适合处理复杂文本。

  • 示例:读取下一行并处理
awk '{print $0; getline; print $0}' file.txt

15.处理二进制数据

通过 strtonum 函数可以处理二进制数据。

  • 示例:将二进制字符串转换为十进制
awk '{print strtonum("0x" $1)}' file.txt

还是那句话:干中学,学中干

如果觉得不错的话,麻烦点个关注,收藏谢谢。

毕竟:

我太想进步了

相关推荐

x-cmd install | jellex - 用 Python 语法在终端里玩转 JSON 数据!

还在为命令行下处理JSON数据烦恼吗?jellex来了!它是一款基于终端的交互式JSON和JSONLines数据处理工具,让你用熟悉的Python语法,轻松过滤、转换和探索JSO...

一篇长文带你在Python里玩转Json数据

Json简介Json(JavaScriptObjectNotation)很多网站都会用到Json格式来进行数据的传输和交换,就像上篇我提到的网易云音乐接口,它们返回的数据都是Json格式的。这因为...

Python JSON 魔法手册:数据转换的终极艺术

对话实录小白:(崩溃)我从API拿到了JSON数据,怎么变成Python对象?专家:(掏出魔法书)用json模块,轻松实现数据转换!JSON基础三连击1.字符串Python对...

Python JSON 详解教程(python json())

JSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式(lightweightdatainterchangeformat)常用于Web应用、配置文件(co...

Python 数据的 JSON 格式序列化及反序列化

在Python中,将数据转换为JSON格式非常简单,可以使用内置的json模块。json模块提供了json.dumps()和json.dump()方法,用于将Python对象...

如何使Python类可JSON序列化(python json 类)

技术背景在Python开发中,JSON(JavaScriptObjectNotation)是一种常用的数据交换格式。然而,Python的json模块默认只能序列化一些基本数据类型,如字典、列表、字...

详细介绍一下Python如何对JSON格式数据进行处理?

在Python中对于JSON数据的处理是在日常开发中的常见需求之一。通常情况下,对JSON数据的处理主要涉及到如下的的几个步骤对于JSON数据的解析操作对于JSON数据的处理操作对于JSON数据的格式...

Python 字典l转换成 JSON(python转化字典)

本文需要5分钟。如果对您有用可以点赞评论关注.Python字典到JSONJSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式,它基于ECMAScrip...

打造熟悉的VS界面风格(vs界面设计美化)

用惯了老机子的VS界面,换新机子时,各种不适应。现在重新打造老款样式:1)下载VisualStudio2013ColorThemeEditorhttps://marketplace.vis...

办公小技巧:全部亮相 让Excel单元格完全显示文本

平时我们在使用Excel制作表格的时候,经常会遇到由于文本内容较多,导致这些内容无法在一个单元格中完全显示。常规的方法是将单元格设置为“自动换行”,但是这样会影响整个文件的美观。下例是某小区的入住登记...

WinForms 中的 CheckBox 控件使用指南

在WinForms中,CheckBox控件是一个允许用户选择或取消选择的单选按钮。它通常用于表示布尔值(真/假)或允许多选的情况。以下是如何使用CheckBox控件的一些基本信息和示例代码。创建...

图片转文字--四种OCR工具的安装和使用

本文仅测试简单的安装和使用,下一步应该是测试不同数据集下的检测准确率和检测效率,敬请期待。作者的系统环境是:笔记本:ThindPadP520OS:win11显卡:QuadroP520一、EasyO...

C# 给Word每一页设置不同图片水印

Word中设置水印时,可加载图片设置为水印效果,但通常添加水印效果时,会对所有页面都设置成统一效果,如果需要对每一页或者某个页面设置不同的水印效果,则可以参考本文中的方法。下面,将以C#代码为例,对W...

集成的面向对象控件Xtreme Controls正式发布v17.0.0

CodejockXtremeControls为Windows图形用户软件工程师提供众多的有关MFC的控件产品,该产品是通过完全测试并专门为图形用户设计的一款专业控件。它是一款集成了面向对象的控件被...

Win10 Build 10061老问题修复新问题来

|责编:刘菲菲【中关村在线软件资讯】4月23日消息:微软今天正式推送了Windows10Build10061预览版这个版本除了正常的功能更新和调整外,还修复了多个bug。其中一部分对于开发者开...