百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

如何高效读取Linux日志文件?这些命令要熟记于心!

liuian 2025-05-28 18:44 47 浏览

在 Linux 系统中,日志文件通常存储在 /var/log 目录下。比如,/var/log/syslog(或 /var/log/messages,视发行版而定)记录系统整体事件,/var/log/auth.log 记录认证相关信息,/var/log/apache2/access.log 则是 Web 服务器的访问日志。这些文件大多是纯文本格式,方便我们用命令行工具直接操作。

但日志文件有个特点:它们往往是动态的,内容会随着系统运行不断追加。而且,有些日志会被压缩成 .gz 文件(比如 /var/log/syslog.1.gz),有些甚至被分割成多个文件(如 kern.log.1kern.log.2)。这就要求我们在读取时,既要能处理实时数据,也要能挖掘历史记录。

基础利器:cat、less 和 more

1.cat

简单粗暴的全文输出

如果你只是想快速瞥一眼日志文件的内容,cat 是最直接的选择。敲下 cat /var/log/syslog,整个文件的内容就会一股脑儿地输出到终端。不过,当日志文件很大时,屏幕会被刷得眼花缭乱,完全看不过来。

  • 小技巧:可以用 cat /var/log/syslog | head -n 50 只看前 50 行,或者 cat /var/log/syslog | tail -n 50 查看最后 50 行。
  • 进阶玩法cat /var/log/syslog | grep "error" 可以快速过滤出包含 "error" 的行,适合初步排查问题。

说明我服务器上暂时没有错误的日志,哈哈。

2.less

翻页浏览的优雅选择

当日志文件太长时,less /var/log/syslog 是更好的工具。它允许你上下滚动查看内容,按 q 退出。

  • 实用快捷键/keyword:搜索关键词(比如 /error),按 n 跳到下一个匹配项。g:跳到文件开头,G:跳到文件末尾。Ctrl+F:向前翻页,Ctrl+B:向后翻页。
  • 实时监控:如果你想边看边刷新最新内容,可以用 less +F /var/log/syslog,相当于 tail -f 的效果,按 Ctrl+C 回到普通模式。

3.more

老派但可靠

more /var/log/syslogless 类似,但功能更简单,只能向下翻页,无法回滚。按空格翻页,q 退出。虽然不如 less 灵活,但在资源紧张的老系统上,它依然是个轻量选择。

实时追踪神器:tail

日志的魅力在于它的动态性,而 tail 正是捕捉这种动态的最佳工具。

  • tail -f:实时监控
    执行 tail -f /var/log/syslog,你会看到日志的最后几行,并且新写入的内容会实时追加到屏幕上。这在排查实时问题(比如服务启动失败)时非常有用。变种tail -n 100 -f /var/log/syslog 可以先显示最后 100 行,再开始实时追踪。
  • tail + grep 的组合拳
    比如,tail -f /var/log/auth.log | grep "sshd" 可以实时监控 SSH 登录相关的日志,帮你迅速发现异常登录尝试。

历史挖掘专家:head 和 grep

1.head

快速瞄准开头

日志文件的前几行往往包含系统启动时的信息,用 head -n 20 /var/log/syslog 可以快速查看开头的 20 行。如果想结合其他工具,比如 head -n 50 /var/log/syslog | grep "kernel",就能聚焦内核相关的启动日志。

2.grep:精准过滤的利刃

grep 是日志分析的灵魂。假设你在 /var/log/apache2/access.log 中找某个 IP 的访问记录:

  • grep "192.168.1.1" /var/log/apache2/access.log
  • 高级用法-i:忽略大小写,如 grep -i "error" /var/log/syslog-r:递归搜索目录下所有文件,比如 grep -r "timeout" /var/log/-A 5:显示匹配行后 5 行,-B 5:显示前 5 行,-C 5:前后各 5 行,方便查看上下文。--color:高亮匹配内容,视觉效果更佳。
  • 实战案例:查找最近的错误日志,tail -n 1000 /var/log/syslog | grep -A 10 "error",既能看到错误行,又能了解后续影响。

处理压缩日志:zcat、zless 和 zgrep

老日志通常会被压缩成 .gz 格式,直接用 catless 是打不开的。这时,zcatzlesszgrep 登场。

  • zcat:解压并输出
    zcat /var/log/syslog.1.gz 会直接将压缩文件内容输出到终端,效果类似 cat
  • zless:翻页查看压缩文件
    zless /var/log/syslog.1.gz 让你像用 less 一样浏览压缩日志。
  • zgrep:搜索压缩日志
    zgrep "error" /var/log/syslog.1.gz 可以直接在压缩文件中搜索关键词,省去手动解压的麻烦。

小贴士:如果需要解压后操作,可以用 gunzip /var/log/syslog.1.gz,但注意备份原文件,避免覆盖。

日志切割与合并:awk 和 sed

日志文件有时需要更精细的处理,比如提取特定字段或清洗数据。这时,awksed 是你的得力助手。

1.awk

字段提取大师

假设 /var/log/apache2/access.log 的格式是 IP - - [时间] "请求" 状态码 字节数,你想提取所有状态码为 404 的请求:

  • awk '$9 == 404' /var/log/apache2/access.log$9 是第 9 个字段,通常是状态码)。
  • 再进一步,提取 IP 和请求:awk '$9 == 404 {print $1, $7}' /var/log/apache2/access.log

2.sed

文本替换与清洗

如果日志中有大量冗余信息,比如时间戳前的无关前缀,可以用 sed 清理:

  • sed 's/^[A-Za-z]\{3\} [0-9]\{2\} [0-9]\{2\}:[0-9]\{2\}:[0-9]\{2\} //' 删除 syslog 中常见的时间戳。
  • 结合管道:cat /var/log/syslog | sed '/error/d' 删除所有含 "error" 的行。

高级玩法:journalctl 和 logrotate

1.journalctl

systemd 日志的瑞士军刀

现代 Linux 系统大多用 systemd 管理日志,日志不再只存于文件,而是由 journald 收集。

  • 查看所有日志:journalctl
  • 按服务过滤:journalctl -u sshd 查看 SSH 服务日志。
  • 按时间段:journalctl --since "2025-03-09 10:00" --until "2025-03-09 12:00"
  • 实时监控:journalctl -f,类似 tail -f
  • 按优先级:journalctl -p 3 只看错误级别(0=紧急,7=调试)。

2.logrotate

管理日志文件

虽然不是直接读取工具,但 logrotate 能帮你管理日志,避免文件过大。配置文件在 /etc/logrotate.conf/etc/logrotate.d/,可以设置日志轮转周期和压缩策略。

相关推荐

总结下SpringData JPA 的常用语法

SpringDataJPA常用有两种写法,一个是用Jpa自带方法进行CRUD,适合简单查询场景、例如查询全部数据、根据某个字段查询,根据某字段排序等等。另一种是使用注解方式,@Query、@Modi...

解决JPA在多线程中事务无法生效的问题

在使用SpringBoot2.x和JPA的过程中,如果在多线程环境下发现查询方法(如@Query或findAll)以及事务(如@Transactional)无法生效,通常是由于S...

PostgreSQL系列(一):数据类型和基本类型转换

自从厂子里出来后,数据库的主力就从Oracle变成MySQL了。有一说一哈,贵确实是有贵的道理,不是开源能比的。后面的工作里面基本上就是主MySQL,辅MongoDB、ES等NoSQL。最近想写一点跟...

基于MCP实现text2sql

目的:基于MCP实现text2sql能力参考:https://blog.csdn.net/hacker_Lees/article/details/146426392服务端#选用开源的MySQLMCP...

ORACLE 错误代码及解决办法

ORA-00001:违反唯一约束条件(.)错误说明:当在唯一索引所对应的列上键入重复值时,会触发此异常。ORA-00017:请求会话以设置跟踪事件ORA-00018:超出最大会话数ORA-00...

从 SQLite 到 DuckDB:查询快 5 倍,存储减少 80%

作者丨Trace译者丨明知山策划丨李冬梅Trace从一开始就使用SQLite将所有数据存储在用户设备上。这是一个非常不错的选择——SQLite高度可靠,并且多种编程语言都提供了广泛支持...

010:通过 MCP PostgreSQL 安全访问数据

项目简介提供对PostgreSQL数据库的只读访问功能。该服务器允许大型语言模型(LLMs)检查数据库的模式结构,并执行只读查询操作。核心功能提供对PostgreSQL数据库的只读访问允许L...

发现了一个好用且免费的SQL数据库工具(DBeaver)

缘起最近Ai不是大火么,想着自己也弄一些开源的框架来捣腾一下。手上用着Mac,但Mac都没有显卡的,对于学习Ai训练模型不方便,所以最近新购入了一台4090的拯救者,打算用来好好学习一下Ai(呸,以上...

微软发布.NET 10首个预览版:JIT编译器再进化、跨平台开发更流畅

IT之家2月26日消息,微软.NET团队昨日(2月25日)发布博文,宣布推出.NET10首个预览版更新,重点改进.NETRuntime、SDK、libraries、C#、AS...

数据库管理工具Navicat Premium最新版发布啦

管理多个数据库要么需要使用多个客户端应用程序,要么找到一个可以容纳你使用的所有数据库的应用程序。其中一个工具是NavicatPremium。它不仅支持大多数主要的数据库管理系统(DBMS),而且它...

50+AI新品齐发,微软Build放大招:拥抱Agent胜算几何?

北京时间5月20日凌晨,如果你打开微软Build2025开发者大会的直播,最先吸引你的可能不是一场原本属于AI和开发者的技术盛会,而是开场不久后的尴尬一幕:一边是几位微软员工在台下大...

揭秘:一条SQL语句的执行过程是怎么样的?

数据库系统能够接受SQL语句,并返回数据查询的结果,或者对数据库中的数据进行修改,可以说几乎每个程序员都使用过它。而MySQL又是目前使用最广泛的数据库。所以,解析一下MySQL编译并执行...

各家sql工具,都闹过哪些乐子?

相信这些sql工具,大家都不陌生吧,它们在业内绝对算得上第一梯队的产品了,但是你知道,他们都闹过什么乐子吗?首先登场的是Navicat,这款强大的数据库管理工具,曾经让一位程序员朋友“火”了一把。Na...

详解PG数据库管理工具--pgadmin工具、安装部署及相关功能

概述今天主要介绍一下PG数据库管理工具--pgadmin,一起来看看吧~一、介绍pgAdmin4是一款为PostgreSQL设计的可靠和全面的数据库设计和管理软件,它允许连接到特定的数据库,创建表和...

Enpass for Mac(跨平台密码管理软件)

还在寻找密码管理软件吗?密码管理软件有很多,但是综合素质相当优秀且完全免费的密码管理软件却并不常见,EnpassMac版是一款免费跨平台密码管理软件,可以通过这款软件高效安全的保护密码文件,而且可以...