数据分析库Pandas

一、认识Pandas数据分析库

Pandas是一个功能强大的数据分析库,它提供了丰富的数据结构和函数来处理和分析表格数据。在处理类似您提供的Excel文件时,首先需要导入Pandas库并读取数据,然后进行数据清洗和预处理,最后进行数据分析和可视化。

二、DataFrame基本操作

是一个二维结构,除了拥有index和value之外,还拥有column

dataframe由多个series组成,无论是行还是列,单独拆分出来都是一个series

三、时间序列和Resample函数

resample函数只能操作日期时间序列值

1、均值

复制代码
print(data.resample(rule='YE').mean())

2、计数

复制代码
print(data.resample(rule='YE').count())

3、求和

复制代码
print(data.resample(rule='YE').sum())

4、求标准差

复制代码
print(data.resample(rule='YE').std())

5、求最大值

复制代码
print(data.resample(rule='YE').std().max())

6、累乘

复制代码
print(data.resample(rule='YE').prod())

四、plot快速可视化

plot函数是pandas中用于数据可视化的一个重要工具,

通过plot函数,可以轻松地将DataFrame或Series对象中的数据以图形的形式展示出来。

plot函数支持多种类型的图形,包括折线图、柱状图、散点图、饼图等,这些不同类型的图形适用于不同的数据分析场景。

此外,plot函数还支持通过参数设置来调整图形的样式,如颜色、标签、图例等,以满足更加个性化的可视化需求。

plot函数的参数名称和含义了matplotlib绘图时的参数是类似的,

如果熟悉matplotlib绘图的话,上手更快。

五、io读取与存储:csv、excel

1、csv

复制代码
# 写入数据
data.to_csv('txt.csv')

# 读取数据
data1 = pd.read_csv('txt.csv')
复制代码
默认情况是对原数据进行覆盖,通过参数设置进行追加
复制代码
data2 = data.tail()
data2.to_csv('txt.csv',mode='a',header=False)
print(data2)

2、Excel

复制代码
data.to_excel('excel.xlsx',sheet_name='a')

# 一次写入多个sheet页
with pd.ExcelWriter('writerExcel.xlsx') as writer:
    data.to_excel(writer, sheet_name='a')
    data.to_excel(writer, sheet_name='b')
    data.to_excel(writer, sheet_name='c')

# 追加新的sheet
with pd.ExcelWriter('writerExcel.xlsx',mode='a',engine='openpyxl') as writer:
    data.to_excel(writer, sheet_name='d')
相关推荐
遇码4 小时前
流式调用中途断连别直接报错:瞬态故障识别、退避重试与中文根因诊断的搭建方法
大数据·人工智能·ai·rust·数据分析·大模型·agent
quantdash_cc5 小时前
Pandas 处理分钟级股票行情:从原始数据清洗到 K 线聚合
开发语言·python·数据分析·pandas·量化交易·股票数据·quantdash
烂蜻蜓5 小时前
Pandas入门教程(四):Series数据结构——创建、索引与常用方法
数据结构·pandas
roman_日积跬步-终至千里6 小时前
【数据Agent论文·查询与语义|05】Spider:为什么换一个数据库,模型就不会查了?
数据库·数据分析
roman_日积跬步-终至千里6 小时前
【数据Agent论文·分析工作流|18】TaskWeaver:数据Agent为什么需要有状态执行?
数据分析
roman_日积跬步-终至千里8 小时前
【数据Agent论文·查询与语义|06】RAT-SQL:怎样把问题、表和字段真正关联起来?
数据库·sql·数据分析
benchmark_cc10 小时前
量化项目启动时,应该先设计数据接口还是先编写策略?从系统架构角度做出正确选择
开发语言·python·数据分析·pandas·量化交易·股票数据·quantdash
roman_日积跬步-终至千里11 小时前
【数据Agent论文·分析工作流|20】Data Interpreter:任务图怎样帮助复杂分析?
人工智能·数据分析
roman_日积跬步-终至千里13 小时前
【数据Agent论文·查询与语义|11】EntSQL:给了业务文档,模型为何还是写不对SQL?
数据库·人工智能·sql·数据分析
roman_日积跬步-终至千里13 小时前
【数据Agent论文·分析工作流|17】Data-Copilot:把重复分析变成可复用接口
数据分析·copilot