Linux 文本处理完整指南:grep、awk、sed、jq 命令详解与实战

本文将教你如何使用 grep、awk、sed 和 jq 实现高效的 Linux 文本处理。这份实用指南涵盖语法、真实场景案例及最佳实践,适用于系统管理员、开发人员和数据工程师。

如果你有过 Linux 操作经验,就会知道文本处理是绕不开的核心需求。无论是解析几 GB 的服务器日志、从 CSV 文件中提取关键信息、批量修改配置文件,还是处理 API 返回的 JSON 数据,你都需要快速且灵活的工具来应对。

好消息是,Linux 自带四款"神器":grepawksedjq。它们各自有独特优势,搭配使用时能解决 90% 的文本处理问题。本文会跳过枯燥的理论,聚焦"当下就能用的实操内容",带你快速上手。

一、Linux 文本处理工具简介

Linux 中的文本处理本质上可归为四类核心任务:搜索、提取、编辑和解析结构化数据。这些工具体积轻量、多数 Linux 发行版预装,且专为命令行效率设计。它们的分工如下:

  • grep:"搜索高手",用于查找文本中的匹配模式
  • awk:"数据专家",用于从结构化文本中提取信息并计算
  • sed:"流编辑器",用于批量修改文本内容
  • jq:"JSON 利器",用于过滤和转换 JSON 数据

二、grep:高效查找文本内容

grep(全称为 Global Regular Expression Print)是定位匹配模式行的首选工具。即便处理大文件,它也能保持极快速度,且支持正则表达式实现精准搜索。

核心特性

  • 支持基础与扩展正则表达式
  • 可递归搜索目录下的所有文件
  • 提供大小写不敏感、显示行号、反向匹配等功能

实操案例

基础搜索:在日志文件中查找所有"ERROR"条目:

复制代码
grep "ERROR" server.log

大小写不敏感 + 显示行号:捕捉"error""Error"等所有变体,并显示对应行号:

复制代码
grep -i -n "error" server.log

递归搜索:在所有 Python 文件中查找"TODO"注释:

复制代码
grep -r "TODO" *.py

反向匹配:显示不包含"DEBUG"的行(适合过滤冗余信息):

复制代码
grep -v "DEBUG" server.log

三、awk:提取与分析结构化数据

awk 不只是工具,更像一门用于文本处理的迷你编程语言。它擅长逐行处理结构化数据(如 CSV 文件或格式固定的日志),能将行拆分为列并执行逻辑运算。

核心特性

  • 可将行拆分为自定义字段(默认以空白字符为分隔符)
  • 支持条件判断、循环和算术运算
  • 借助 BEGIN/END 块实现初始化 / 收尾操作

实操案例

提取 CSV 字段 :从 users.csv(列结构:姓名,年龄,城市)中打印姓名和城市:

继续阅读全文:Linux 文本处理完整指南:grep、awk、sed、jq 命令详解与实战

相关推荐
呉師傅6 分钟前
关于惠普LaserJet1018打印机在Windows11上打印颜色偏淡的问题解决方法
运维·服务器·windows·计算机外设·电脑
九硕智慧建筑一体化厂家11 分钟前
楼宇智能优选!KNX总线系统打造稳定高效智能控制体系
运维·人工智能·笔记·智慧城市
正在走向自律12 分钟前
数采与虚拟仿真技术在电力智能运维赛道的实践探索
运维·数据采集·虚拟仿真·技能竞赛·人机协同·惯性动捕·电力智能运维
qq_113601493529 分钟前
CopyEscape Docker容器逃逸(CVE-2026-17106)
运维·docker·容器
修先生33 分钟前
WisQuery 一套开箱即用、可 Docker 一键部署的 智能问数 + 知识库 + 智能问答 一体化平台
运维·docker·容器
Rain的Java大神之路1 小时前
Docker搭建Redis集群完全指南
java·运维·redis·后端·docker·容器·架构
智购科技无人售货机厂家1 小时前
2026自动售货机远程运维平台设计:从设备诊断到预测性维护的工程实践~YH
运维·python·物联网·架构·django·scikit-learn
Raas1001 小时前
大模型网关和API网关区别是什么?MAI Gateway统一AI流量治理
java·大数据·运维·人工智能·gateway·企业级·ai网关
Dovis(誓平步青云)1 小时前
番茄钟真正难的不是倒计时:启动、暂停、重置与页面销毁
android·服务器·前端
吹什么轩1 小时前
Linux系统复习:权限的解析
linux·运维·服务器