同事查日志太慢,我现场教他一套 awk、tail、grep、sed 组合拳

昨天临下班,生产环境出现了一个偶发的报错预警。

旁边的同事正~~准备排查,只见他输入命令 cat application.log 一个 2GB 大小文本啊,日志哗哗刷啥也看不清,crtl + c 也停不下来了,最后轻轻的关闭连接,又重新打开了一个~

后端开发来说,熟练掌握 Linux 的日志分析命令是基本功,整理几一些基于 taillessgrepsedawk 的日志查询场景,希望能帮你快速定位问题。

tail

很多新手习惯用 cat,但对于大文件,cat 会导致屏幕刷屏,还容易把终端卡死。tail 才是实时监控的神器。

真实场景 A:服务发版启动监控

每次发版重启服务时,我们都需要确认 Spring Boot 是否启动成功,或者有没有初始化报错。

bash 复制代码
# -f (follow):实时追加显示文件尾部内容
tail -f logs/application.log

真实场景 B:配合测试复现 Bug

测试同学说:我现在点一下按钮,你看看后台有没有报错。

此时不需要看历史日志,只需要盯着最新的输出。

bash 复制代码
# 只看最后 200 行,并保持实时刷新,避免被历史日志干扰
tail -n 200 -f logs/application.log

less

如果需要查看之前的日志,推荐使用 less。不同于 vim 会一次性加载整个文件占用大量内存,less 是按需加载,打开几个 G 的文件也极其流畅,且支持向后回溯。

真实场景:追查某笔客诉订单

运营反馈:刚才 10 点左右,订单号 ORD12345678 支付失败了。

你需要从日志末尾开始,往前反向查找这个订单号。

bash 复制代码
less logs/application.log

进入界面后的操作流:

  1. Shift + G 先跳到日志最末尾(因为报错通常发生在最近)。
  2. ?ORD12345678 输入问号+订单号,向上反向搜索
  3. n:如果当前这行不是关键信息,按 n 继续向上找上一次出现的位置。
  4. Shift + F 如果看着看着,日志又更新了,按这个组合键可以让 less 进入类似 tail -f 的实时滚动模式;按 Ctrl + C 退回浏览模式。

grep

grep 是最常用的搜索命令,但在实际业务中,简单的关键词搜索往往不够用。

真实场景 A:还原报错现场(重点)

只看到 NullPointerException 这一行往往无法定位问题,我们需要知道报错前 的请求参数是什么,报错后的堆栈信息是什么。

此时必须配合 -C (Context) 参数。

bash 复制代码
# 搜索异常关键字,并显示该行 "前后各 20 行"
grep -C 20 "NullPointerException" logs/application.log

真实场景 B:全链路追踪 TraceId

微服务我们通常会通过 TraceId 串联请求。日志文件可能发生了滚动(Rolling),变成了 app.logapp.log.1app.log.2

我们需要在所有日志文件中搜索同一个 TraceId。

bash 复制代码
# 搜索当前目录下所有以 app.log 开头的文件
grep "TraceId-20251219001" logs/app.log*

真实场景 C:统计异常频次

老板问:"Redis 超时异常今天到底发生了多少次?是偶发还是大规模?"

不需要数数,直接统计行数。

bash 复制代码
# -c (count):只统计匹配的行数
grep -c "RedisConnectionException" logs/application.log

真实场景 D:排除干扰噪音

排查问题时,日志里充斥着大量无关的 INFO 心跳日志或健康检查日志,严重干扰视线。

bash 复制代码
# -v (invert):显示不包含 "HealthCheck" 的所有行
grep -v "HealthCheck" logs/application.log

sed

有时候日志非常大,例如有 10GB,grep 搜出来的内容依然过多。如果我们明确知道生产事故发生在 14:00 到 14:05 之间,该怎么办?

下载整个日志不现实,sed 可以帮我们把这段时间的日志单独出来,保存成一个小文件慢慢分析。

真实场景:导出事故时间窗口的日志

bash 复制代码
# 语法:sed -n '/开始时间/,/结束时间/p' 源文件 > 目标文件
# 注意:时间格式必须和日志里的格式完全一致
sed -n '/2025-12-19 14:00/,/2025-12-19 14:05/p' logs/application.log > error_segment.log

这样你就得到了一个只有几 MB 的 error_segment.log,这时候再下载到本地分析,或者发给同事,都非常方便。

Awk

awk 擅长处理列数据,对于格式规范的日志,如 Nginx 访问日志、Apache 日志,它可以直接在服务器上生成简报。

真实场景 A:遭到攻击,查找恶意 IP

服务突然报警 CPU 飙升,怀疑遭到 CC 攻击或爬虫抓取,我们需要分析 Nginx 日志,找出访问量最高的 IP。

假设日志格式第一列是 IP:

bash 复制代码
# 1. awk '{print $1}':提取第一列(IP)
# 2. sort:排序,把相同的 IP 排在一起
# 3. uniq -c:去重并统计每个 IP 出现的次数
# 4. sort -nr:按次数(n)倒序(r)排列
# 5. head -n 10:取前 10 名

awk '{print $1}' access.log | sort | uniq -c | sort -nr | head -n 10

真实场景 B:找出响应最慢的接口

Nginx 日志中通常记录了响应时间,假设在最后一列,我们想把响应时间超过 1 秒的请求找出来。

swift 复制代码
# $NF 代表最后一列
# 打印所有响应时间大于 1 秒的 URL(假设 URL 在第 7 列)
awk '$NF > 1.000 {print $7, $NF}' access.log

总结

举的例子都是我常用的,建议把这几个命令刻在脑子里或者收藏本文,下次遇到生产问题,对着场景直接复制粘贴就ok了。

看完等于学会,点个赞吧!!!

相关推荐
Rinai_R2 小时前
Go 的调度模型
开发语言·后端·golang
爱学大树锯2 小时前
【双雄压榨】本地机访问宿主机Portainer(9000端口)
后端·intellij-idea
桦说编程2 小时前
实现一个简单的并发度控制执行器
java·后端·性能优化
小兔崽子去哪了2 小时前
机器学习,KNN 算法
后端·python·机器学习
初次攀爬者2 小时前
知识库-向量化功能-文本文件向量化
后端
Java水解2 小时前
MySQL索引分析以及相关面试题
后端·mysql·面试
总是学不会.3 小时前
[特殊字符] 自动分区管理系统实践:让大型表维护更轻松
java·后端·数据库开发·开发
阿杰AJie3 小时前
通用 Token 管理工具(详细注释 + 完整使用示例 + 设计说明)
java·后端·程序员
用户47949283569153 小时前
并发编程里的"堵车"与"红绿灯":死锁、活锁与两种锁策略(乐观锁、悲观锁)
前端·后端