【py】使用numpy读取文件,并统计

我们需要编写一个脚本来读取文本文件,然后进行字数统计和词频统计。

以下是一个简单的Python脚本,它使用numpy来处理数据。

首先,确保你已经安装了numpy库。如果没有安装,可以通过运行pip install numpy来安装。

然后,你可以使用以下脚本:

import numpy as np

import re

from collections import Counter

假设你的文本文件名为'file.txt'

file_path = 'file.txt'

1. 读取文件

with open(file_path, 'r', encoding='utf-8') as file:

text = file.read()

2. 统计文件的总字数

total_words = len(text.split())

print(f'Total number of words: {total_words}')

3. 统计出现频率最高的10个词,并进行排序

使用正则表达式来找到单词,这里假设单词由字母组成

words = re.findall(r'\b\w+\b', text.lower())

word_counts = Counter(words)

获取出现频率最高的10个词

most_common_words = word_counts.most_common(10)

print('Most common words:')

for word, count in most_common_words:

print(f'{word}: {count}')

如果你想使用numpy来处理数据,你可以将文本转换为numpy数组,但这在这个例子中是多余的

text_array = np.array(text)

请将file.txt替换为你的文件名。这个脚本首先读取文件内容,然后统计总字数,接着使用正则表达式来找到所有的单词,并使用collections.Counter来统计每个单词的出现次数,最后输出出现频率最高的10个词。

请注意,这个脚本假设文本文件是UTF-8编码的。如果你的文件使用不同的编码,请相应地更改open函数中的encoding参数。

相关推荐
statistican_ABin13 分钟前
中国互联网与数字生活分析报告—基于1990-2023年世界银行互联网数据的多维度分析
python
“AI国潮设计-小江”25 分钟前
【Python/SDXL实战】潮汕国潮IP视觉落地:普宁美食猫IP & 创意甜品设计(附ComfyUI工作流思路)
开发语言·人工智能·python·prompt·aigc
Allen_LVyingbo1 小时前
医疗人工智能项目全生命周期管理系统:监管知识建模、工程实现与实证评估(下)
大数据·数据库·人工智能·python·自然语言处理·自动化
wuhuhuan1 小时前
Case Generator 平台升级
python·测试工具·自动化
RobinDevNotes1 小时前
用 Profile 揪出大模型训练性能瓶颈
python·性能优化
李航19831 小时前
用 DeepDraw 几何引擎开发建筑设计软件(六):创建画线工具
python·软件构建
AI 编程助手GPT1 小时前
Python 备份 SQLite:为什么复制了 .db,恢复后还是少数据?
人工智能·python·ai·chatgpt
狗都不学爬虫_2 小时前
AI逆向 - 天御无感点击验证(补+纯)
爬虫·python·网络爬虫
529宝宝起名网2 小时前
用 Python 开发历史名字查询与起名灵感工具:从古籍人物数据库到名字文化故事生成
开发语言·前端·python
用户298698530142 小时前
Python 将 HTML 转换为 Word 文档的实践指南
python·html·api