Linux中grep、sed和awk常见用法总结

1.概述

Linux系统下，grep、sed和awk三个命令是最常用的、非常强大的文本处理工具，可以用于搜索、替换、过滤、排序等多种操作，掌握这三种工具的用法，可以大大提高我们在Linux下处理文本的效率。

2.grep 命令

grep是一种非常常见的文本搜索工具，它可以搜索指定字符串在一个或多个文件中出现的行，并将结果输出到标准输出。语法格式如下：

|--------------------------------------|
| grep $OPTIONS$ PATTERN $FILE...$ |

其中，OPTIONS表示选项，PATTERN表示要搜索的模式，FILE表示要搜索的文件名。

grep命令的常见选项包括：

-i：忽略大小写
-w：完全匹配
-v：显示不匹配的行
-n：显示行号
-c：显示匹配行的数量
-r：递归搜索子目录
-e：搜索多个字符串

详细选项参数及其含义可以通过"grep --help"获取，具体如下：

|----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
| $test@localhost \~$ $ grep --help 用法:grep $选项$ ... 模式 $文件$ ... 在每个 <文件>中查找给定<模式>。例如：grep -i 'hello world' menu.h main.c <模式>可以包括多个模式字符串，使用换行符进行分隔。模式选择与解释： -E, --extended-regexp <模式> 是扩展正则表达式 -F, --fixed-strings <模式> 是字符串 -G, --basic-regexp <模式> 是基本正则表达式 -P, --perl-regexp <模式> 是 Perl 正则表达式 -e, --regexp=<模式> 用指定的<模式>字符串来进行匹配操作 -f, --file=<文件> 从给定<文件>中取得<模式> -i, --ignore-case 在模式和数据中忽略大小写 --no-ignore-case 不要忽略大小写（默认） -w, --word-regexp 强制<模式>仅完全匹配字词 -x, --line-regexp 强制<模式>仅完全匹配整行 -z, --null-data 数据行以一个 0 字节结束，而非换行符杂项: -s, --no-messages 不显示错误信息 -v, --invert-match 选中不匹配的行 -V, --version 显示版本信息并退出 --help 显示此帮助并退出输出控制： -m, --max-count=<次数> 得到给定<次数>次匹配后停止 -b, --byte-offset 输出的同时打印字节偏移 -n, --line-number 输出的同时打印行号 --line-buffered 每行输出后刷新输出缓冲区 -H, --with-filename 为输出行打印文件名 -h, --no-filename 输出时不显示文件名前缀 --label=<标签> 将给定<标签>作为标准输入文件名前缀 -o, --only-matching 只显示行中非空匹配部分 -q, --quiet, --silent 不显示所有常规输出 --binary-files=TYPE 设定二进制文件的 TYPE（类型）； TYPE 可以是 'binary'、'text' 或 'without-match' -a, --text 等同于 --binary-files=text -I 等同于 --binary-files=without-match -d, --directories=ACTION 读取目录的方式； ACTION 可以是`read', `recurse',或`skip' -D, --devices=ACTION 读取设备、先入先出队列、套接字的方式； ACTION 可以是`read'或`skip' -r, --recursive 等同于--directories=recurse -R, --dereference-recursive 同上，但遍历所有符号链接 --include=GLOB search only files that match GLOB (a file pattern) --exclude=GLOB skip files that match GLOB --exclude-from=FILE skip files that match any file pattern from FILE --exclude-dir=GLOB skip directories that match GLOB -L, --files-without-match 只打印没有匹配上的<文件>的名称 -l, --files-with-matches 只打印有匹配的<文件>的名称 -c, --count 只打印每个<文件>中的匹配行数目 -T, --initial-tab 行首制表符对齐（如有必要） -Z, --null 在<文件>名最后打印空字符文件控制: -B, --before-context=NUM 打印文本及其前面NUM 行 -A, --after-context=NUM 打印文本及其后面NUM 行 -C, --context=NUM 打印NUM 行输出文本 -NUM 等同于 --context=NUM --color $=WHEN$ , --colour $=WHEN$ 使用标记高亮匹配字串； WHEN 可以是"always"、"never"或"auto" -U, --binary 不要清除行尾的 CR 字符（MSDOS/Windows）若给定<文件>为"-"，则从读取标准输入。若无<文件>参数，则除非处于递归工作模式视为从"."读取之外，一律视为从"-"读取。如果提供了少于两个<文件>参数，则默认启用 -h 选项。如果有任意行（或者指定了 -L 选项并有任意文件）被匹配，则退出状态为 0，否则为 1；如果有错误产生，且未指定 -q 参数，则退出状态为 2。 |

3.sed 命令

sed是一种流编辑器，它可以执行各种文本操作，如替换、删除、插入等。语法格式如下：

|-------------------------------------|
| sed $OPTIONS$ COMMAND $FILE...$ |

其中，OPTIONS表示选项，COMMAND表示要执行的sed命令，FILE表示要处理的文件名。

sed命令的常见动作包括：

a：新增，a的后面可以接字符串，而这些字符串会在新的一行出现（当前行的后一行）
i：插入指定字符串，i的后面可以接字符串，而这些字符串会在新的一行出现（当前行的前一行）
s：替换指定模式，通常会搭配正则表达式
c：替换指定行
d：删除指定行
y：字符串转换
p：打印匹配的行，通常会与参数sed -n一起使用

详细选项参数及其含义可以通过"sed --help"获取，具体如下：

4.awk 命令

awk是一种文本处理工具，它可以用于格式化、过滤与计算等操作。语法格式如下：

|-------------------------------------------------|
| awk $OPTIONS$ 'PATTERN {ACTION} ' $FILE...$ |

其中，OPTIONS表示选项，PATTERN表示要匹配的模式，ACTION 表示要执行的操作，FILE表示要处理的文件名。

awk命令的常见选项包括：

print：打印指定内容
if：条件判断
for：循环结构
sum：计算指定

详细选项参数及其含义可以通过"awk --help"获取，具体如下：

5.使用实例

(1) grep使用实例

(2) sed使用实例

(3) awk使用实例