awk做wordcount

使用awk进行wordcount

被处理数据在文件access_2024-1-21.log(一个单词一行)中,内容如下:

复制代码
word
coutn
wm
sapce
US
china
WORD
WORD
wode
wode
1
2
3333
zzzz
space
spaceX
china
word

执行如下命令可以统计出每个单词出现次数:

复制代码
```bash
 awk '{S[$1]++}END{for(k in S) print S[k],k}' access_2024-1-21.log

结果如下:

root@Oler wm\]# awk '{S\[$1\]++}END{for(k in S) print S\[k\],k}' access_2024-1-21.log 1 spaceX 1 3333 1 zzzz 1 sapce 1 coutn 1 wm 1 space 1 1 1 2 2 china 2 wode 2 WORD 1 US 2 word 命令解释: 此处的S变量表示一个数组,该数组的索引为每个不重复的单词,值就是S\[$1\],$1代表单词那一列。awk是每都一行执行一次动作。 此处就是每读一行,同一个key对应的值就增加一。从0开始计算。当统计完,最后,也就是END对应的内容,就是循环打印出存储了统计结果的数组的key和值。

相关推荐
HIT_Weston15 分钟前
103、【Ubuntu】【Hugo】搭建私人博客:搜索功能(四)
linux·运维·ubuntu
2501_9458374315 分钟前
事件驱动无服务器,Knative重塑原子化运算
服务器
旖旎夜光17 分钟前
Linux(11)(中)
linux·网络
yaoxin52112319 分钟前
296. Java Stream API - 二元操作符与“单位元“
java·服务器·windows
txinyu的博客27 分钟前
前置声明与 extern
linux·c++
视觉震撼2 小时前
逐步指南:为大模型构建自动化知识图谱
运维·自动化·知识图谱
yeflx2 小时前
OpenMVS源码编译
运维
有泽改之_3 小时前
ssh命令使用
linux·运维·ssh
玩大数据的龙威3 小时前
【乱占耕地建房】—试点工作平台自动化填报系统
运维·自动化
梁洪飞3 小时前
noc 片上网络
linux·arm开发·嵌入式硬件·arm