Go语言实战案例-统计文件中每个字母出现频率

以下是《Go语言100个实战案例》中的 文件与IO操作篇 - 案例19:统计文件中每个字母出现频率 的完整内容。本案例适合用来练习文件读取、字符处理、map统计等基础技能。

🎯 案例目标

读取一个本地文本文件,统计并打印出其中每个英文字母(忽略大小写)出现的次数和频率。


🧩 应用场景

  • • 文本分析、自然语言处理前的预处理
  • • 编写字频统计工具
  • • 简化数据分析或可视化处理的前置步骤

🧠 涉及知识点

  • • 使用 os.Open() 读取文件
  • bufio.Scanner 按行读取
  • • 字符串遍历与判断
  • • 使用 map[rune]int 统计频率
  • • 转换大小写 unicode.ToLower

💻 示例代码:统计字母频率

go 复制代码
package main

import (
    "bufio"
    "fmt"
    "os"
    "unicode"
)

func main() {
    filePath := "sample.txt"

    // 打开文件
    file, err := os.Open(filePath)
    if err != nil {
        fmt.Println("无法打开文件:", err)
        return
    }
    defer file.Close()

    // 用于存储每个字母出现的次数
    frequency := make(map[rune]int)
    totalLetters := 0

    scanner := bufio.NewScanner(file)
    for scanner.Scan() {
        line := scanner.Text()
        for _, ch := range line {
            if unicode.IsLetter(ch) {
                ch = unicode.ToLower(ch)
                frequency[ch]++
                totalLetters++
            }
        }
    }

    // 打印结果
    fmt.Println("字母频率统计:")
    for ch := 'a'; ch <= 'z'; ch++ {
        count := frequency[ch]
        if count > 0 {
            percentage := float64(count) / float64(totalLetters) * 100
            fmt.Printf("%c: %d (%.2f%%)\n", ch, count, percentage)
        }
    }
}

📂 示例文本内容(sample.txt)

vbnet 复制代码
Go is expressive, concise, clean, and efficient.
Its concurrency mechanisms make it easy to write programs.

📤 执行结果示例

erlang 复制代码
字母频率统计:
a: 5 (4.85%)
c: 7 (6.80%)
d: 2 (1.94%)
e: 10 (9.71%)
f: 2 (1.94%)
g: 1 (0.97%)
...
t: 8 (7.77%)
w: 1 (0.97%)

🛠 技术说明

函数 说明
os.Open() 打开文件
bufio.NewScanner() 按行扫描文本
unicode.IsLetter() 判断字符是否为英文字母
unicode.ToLower() 转换为小写字母以便统计统一
map[rune]int 使用字符为键的字典进行计数

🧪 拓展练习

  • • 统计所有字符(包括数字、标点)
  • • 按频率从高到低排序输出
  • • 将结果保存为 CSV 或 JSON 文件
  • • 添加参数选择分析哪个文件或字母范围(如大写、小写)

✅ 小结

这个案例帮助你掌握了如何在 Go 中进行文本分析,特别是字母频率统计。这是数据清洗和自然语言处理中的常见需求。


相关推荐
尘鹄4 小时前
go 初始化组件最佳实践
后端·设计模式·golang
墩墩分墩4 小时前
【Go语言入门教程】 Go语言的起源与技术特点:从诞生到现代编程利器(一)
开发语言·后端·golang·go
程序员爱钓鱼7 小时前
Go语言实战案例- 开发一个ToDo命令行工具
后端·google·go
学渣676567 小时前
文件传输工具rsync|rust开发环境安装|Ascend实验相关命令
开发语言·后端·rust
我是渣哥7 小时前
Java String vs StringBuilder vs StringBuffer:一个性能优化的探险故事
java·开发语言·jvm·后端·算法·职场和发展·性能优化
科技树支点8 小时前
无GC的Java创新设计思路:作用域引用式自动内存管理
java·python·go·web·编程语言·编译器
qq_172805598 小时前
GO : cannot find module
学习·go
晚安里8 小时前
JVM相关 4|JVM调优与常见参数(如 -Xms、-Xmx、-XX:+PrintGCDetails) 的必会知识点汇总
java·开发语言·jvm·后端·算法
齐 飞10 小时前
SpringBoot实现国际化(多语言)配置
java·spring boot·后端
David爱编程11 小时前
锁升级机制全解析:偏向锁、轻量级锁、重量级锁的秘密
java·后端