Go语言实战案例-统计文件中每个字母出现频率

以下是《Go语言100个实战案例》中的 文件与IO操作篇 - 案例19:统计文件中每个字母出现频率 的完整内容。本案例适合用来练习文件读取、字符处理、map统计等基础技能。

🎯 案例目标

读取一个本地文本文件,统计并打印出其中每个英文字母(忽略大小写)出现的次数和频率。


🧩 应用场景

  • • 文本分析、自然语言处理前的预处理
  • • 编写字频统计工具
  • • 简化数据分析或可视化处理的前置步骤

🧠 涉及知识点

  • • 使用 os.Open() 读取文件
  • bufio.Scanner 按行读取
  • • 字符串遍历与判断
  • • 使用 map[rune]int 统计频率
  • • 转换大小写 unicode.ToLower

💻 示例代码:统计字母频率

go 复制代码
package main

import (
    "bufio"
    "fmt"
    "os"
    "unicode"
)

func main() {
    filePath := "sample.txt"

    // 打开文件
    file, err := os.Open(filePath)
    if err != nil {
        fmt.Println("无法打开文件:", err)
        return
    }
    defer file.Close()

    // 用于存储每个字母出现的次数
    frequency := make(map[rune]int)
    totalLetters := 0

    scanner := bufio.NewScanner(file)
    for scanner.Scan() {
        line := scanner.Text()
        for _, ch := range line {
            if unicode.IsLetter(ch) {
                ch = unicode.ToLower(ch)
                frequency[ch]++
                totalLetters++
            }
        }
    }

    // 打印结果
    fmt.Println("字母频率统计:")
    for ch := 'a'; ch <= 'z'; ch++ {
        count := frequency[ch]
        if count > 0 {
            percentage := float64(count) / float64(totalLetters) * 100
            fmt.Printf("%c: %d (%.2f%%)\n", ch, count, percentage)
        }
    }
}

📂 示例文本内容(sample.txt)

vbnet 复制代码
Go is expressive, concise, clean, and efficient.
Its concurrency mechanisms make it easy to write programs.

📤 执行结果示例

erlang 复制代码
字母频率统计:
a: 5 (4.85%)
c: 7 (6.80%)
d: 2 (1.94%)
e: 10 (9.71%)
f: 2 (1.94%)
g: 1 (0.97%)
...
t: 8 (7.77%)
w: 1 (0.97%)

🛠 技术说明

函数 说明
os.Open() 打开文件
bufio.NewScanner() 按行扫描文本
unicode.IsLetter() 判断字符是否为英文字母
unicode.ToLower() 转换为小写字母以便统计统一
map[rune]int 使用字符为键的字典进行计数

🧪 拓展练习

  • • 统计所有字符(包括数字、标点)
  • • 按频率从高到低排序输出
  • • 将结果保存为 CSV 或 JSON 文件
  • • 添加参数选择分析哪个文件或字母范围(如大写、小写)

✅ 小结

这个案例帮助你掌握了如何在 Go 中进行文本分析,特别是字母频率统计。这是数据清洗和自然语言处理中的常见需求。


相关推荐
陈随易41 分钟前
阿里千问3发布最强AI编程模型Coder,能力堪比Claude 4,1M上下文
前端·后端·程序员
生无谓1 小时前
ThreadLocal的使用
后端
Java水解1 小时前
美团Java面试题、笔试题(含答案)
java·后端·面试
狗头大军之江苏分军1 小时前
我依然“瞧不起”努力的人,更讨厌歌颂努力的人
前端·后端
一只叫煤球的猫2 小时前
这些 Spring Boot 默认配置不改,迟早踩坑
java·spring boot·后端
段清雅2 小时前
Go语言的区块链
开发语言·后端·golang
onejason2 小时前
Java 爬虫实战指南:获取淘宝商品详情
java·前端·后端
雷渊2 小时前
LangChain4j-ChatModel、EmbeddingModel、ImageModel、ModerationModel、ScoringModel的区别?
后端·llm
码出极致2 小时前
java实现高并发场景下三级缓存的数据一致性
后端
南雨北斗3 小时前
Apache环境下SSL证书合并顺序
后端