Python 数据分析与可视化 Day 3 - Pandas 数据筛选与排序操作

🎯 今日目标

  • 掌握 DataFrame 的条件筛选(布尔索引)
  • 学会多条件筛选、逻辑运算
  • 熟练使用排序(sort_values)提升数据组织力
  • 结合列选择进行数据提取分析

🧪 一、列选择与基本筛选

✅ 选择单列 / 多列

python 复制代码
df["成绩"]          # 返回 Series
df[["姓名", "成绩"]] # 返回新的 DataFrame

✅ 条件筛选(布尔索引)

python 复制代码
# 筛选出成绩大于 80 的学生
df[df["成绩"] > 80]

# 获取性别为"女"的学生
df[df["性别"] == "女"]

✅ 多条件筛选(逻辑运算符)

python 复制代码
# 成绩大于 80 且是男生
df[(df["成绩"] > 80) & (df["性别"] == "男")]

# 成绩不及格 或 未填写是否及格
df[(df["成绩"] < 60) | (df["是否及格"] == False)]

⚠️ 注意:逻辑运算使用 &|~,并加上括号!


🔢 二、数据排序

✅ 按单列排序

python 复制代码
df.sort_values("成绩")                     # 升序
df.sort_values("成绩", ascending=False)   # 降序

✅ 按多个字段排序

python 复制代码
df.sort_values(["是否及格", "成绩"], ascending=[True, False])

🔍 三、列选择 + 排序综合练习

python 复制代码
df[df["性别"] == "女"][["姓名", "成绩"]].sort_values("成绩", ascending=False)

🧪 今日练习任务

使用前两天处理好的 students_cleaned.csv 文件,完成以下操作:

📝 练习列表

  1. 筛选出成绩大于等于 80 的学生

  2. 筛选出成绩不及格的男生

  3. 按成绩从高到低排序,并只显示"姓名"和"成绩"

  4. 统计男女生人数(使用 value_counts

  5. 按性别分组后,计算各组平均成绩(使用 groupby

    python 复制代码
    import pandas as pd
    import os
    
    # 加载数据文件路径
    input_path = "data/students_cleaned.csv"
    
    if not os.path.exists(input_path):
        raise FileNotFoundError("❌ 找不到文件:data/students_cleaned.csv。请先运行前两天的清洗脚本。")
    
    # 加载 DataFrame
    df = pd.read_csv(input_path)
    print("📊 数据加载成功:")
    print(df.head())
    
    # 1. 筛选出成绩 ≥ 80 的学生
    print("\n🎯 成绩 ≥ 80 的学生:")
    print(df[df["成绩"] >= 80])
    
    # 2. 筛选出成绩不及格的男生
    print("\n🎯 成绩不及格的男生:")
    condition = (df["成绩"] < 60) & (df["性别"] == "男")
    print(df[condition])
    
    # 3. 按成绩从高到低排序,显示"姓名"和"成绩"
    print("\n🎯 按成绩排序(降序)显示姓名和成绩:")
    sorted_df = df.sort_values("成绩", ascending=False)[["姓名", "成绩"]]
    print(sorted_df)
    
    # 4. 统计性别分布
    print("\n🎯 男女生人数统计:")
    print(df["性别"].value_counts())
    
    # 5. 按性别分组,统计平均成绩
    print("\n🎯 按性别分组的平均成绩:")
    print(df.groupby("性别")["成绩"].mean())

    结果输出:

    python 复制代码
    📊 数据加载成功:
       姓名 性别    成绩   是否及格
    0  张三  男  88.0   True
    1  李四  女  78.0   True
    2  王五  男  59.0  False
    3  田七  女  78.0  False
    
    🎯 成绩 ≥ 80 的学生:
       姓名 性别    成绩  是否及格
    0  张三  男  88.0  True
    
    🎯 成绩不及格的男生:
       姓名 性别    成绩   是否及格
    2  王五  男  59.0  False
    
    🎯 按成绩排序(降序)显示姓名和成绩:
       姓名    成绩
    0  张三  88.0
    1  李四  78.0
    3  田七  78.0
    2  王五  59.0
    
    🎯 男女生人数统计:
    性别
    男    2
    女    2
    Name: count, dtype: int64
    
    🎯 按性别分组的平均成绩:
    性别
    女    78.0
    男    73.5
    Name: 成绩, dtype: float64

✍️ 今日总结

  • 掌握了布尔索引与逻辑运算筛选数据
  • 熟悉了多列组合排序操作
  • 学会了常用的数据子集提取方法
  • 初步接触了分组聚合分析
相关推荐
测试199816 分钟前
软件测试之压力测试总结
自动化测试·软件测试·python·测试工具·职场和发展·测试用例·压力测试
李昊哲小课44 分钟前
销售数据可视化分析项目
python·信息可视化·数据分析·matplotlib·数据可视化·seaborn
isNotNullX1 小时前
实时数仓和离线数仓还分不清楚?看完就懂了
大数据·数据库·数据仓库·人工智能·数据分析
烛阴1 小时前
带参数的Python装饰器原来这么简单,5分钟彻底掌握!
前端·python
全干engineer1 小时前
Flask 入门教程:用 Python 快速搭建你的第一个 Web 应用
后端·python·flask·web
nightunderblackcat1 小时前
新手向:Python网络编程,搭建简易HTTP服务器
网络·python·http
李昊哲小课2 小时前
pandas销售数据分析
人工智能·python·数据挖掘·数据分析·pandas
C嘎嘎嵌入式开发2 小时前
python之set详谈
开发语言·python
之歆3 小时前
Python-正则表达式-信息提取-滑动窗口-数据分发-文件加载及分析器-浏览器分析-学习笔记
python·学习·正则表达式
往日情怀酿做酒 V17639296383 小时前
pytorch的介绍以及张量的创建
人工智能·pytorch·python