精准分工:云南省中职大数据赛项(3 人团队)

编写依据 :2025年云南省赛赛项规程、中职专业教学标准、行业通用技术规范

核心目标 :原理通透、操作规范、故障可排、题目可变、能力可迁移

队员 A:

平台搭建与数据库运维****(核心环境岗)****

负责模块

  1. 大数据平台搭建(Hadoop 完全分布式、Hive、MySQL 元数据配置)
  2. 数据库配置维护(建库建表、CSV 导入、SQL 增删改查、统计查询)

核心学习内容

  • Hadoop+JDK 环境变量、节点配置、免密登录、集群启动与 jps 验证
  • Hive 安装、MySQL 元数据配置、schematool 初始化
  • MySQL 建表、数据导入、常用查询(计数、平均值、分组统计)
  • 集群故障排查、进程启动失败处理

队员 B:

数据处理、标注、统计****(核心数据岗)****

负责模块

  1. 数据获取与清洗(Python 处理空值、异常值、生成新 CSV)
  2. 数据标注(Python 统计评论数、打标签:热门 / 普通)
  3. 数据统计(HDFS 文件上传、MapReduce 打包运行、结果输出)

核心学习内容

  • Pandas 读取 CSV、空值 / 异常值过滤、数据保存
  • 数据标注逻辑编码、结果导出 CSV
  • HDFS 上传下载、MapReduce 打包部署、运行与结果读取
  • 处理中文编码、路径错误、权限问题

队员 C:

数据可视化、业务分析、综合展示****(输出展示岗)****

负责模块

  1. 数据可视化(堆叠图、散点图、柱状图)
  2. 业务分析报告(入住影响因素、评分影响因素、建议)
  3. 综合展示(10 分钟讲解:流程 + 技能 + 思路)
  4. 职业素养(团队协作、规范操作)

核心学习内容

  • Matplotlib 绘制三类图表、样式美化、截图保存
  • 业务分析模板撰写:数据→图表→结论→建议
  • 综合展示 PPT / 讲稿、计时演练(严格≤10 分钟)
  • 报告格式规范、文件命名与提交
相关推荐
数字新视界16 分钟前
一体化机柜在数据中心运维中的创新应用与优势分析
大数据·服务器·数据库·动环监控系统·动力与环境监控系统
FinelyYang28 分钟前
考试系统简答题 AI 阅卷:覆盖度驱动、异步评分与人机协同落地实践
java·大数据·人工智能
SelectDB38 分钟前
从 StarRocks 走向 Apache Doris:如何实现引擎平滑替换与架构升级?
大数据·数据库·数据分析
大大大大晴天1 小时前
每天认识一个组件:JanusGraph
大数据
数字新视界3 小时前
信创机房动环监控技术在智能运维中的应用与优势分析
大数据·服务器·数据库·动环监控系统·动力与环境监控系统
清华kenny4 小时前
中医馆如何参考安徽亳州中医AI健康辨识仪品牌排名前十
大数据·人工智能·安徽晓得养
GlobalInfo5 小时前
全球及中国机器人现场部署服务行业研究报告(2026版):市场现状、行业前景与占有率分析
大数据·运维·人工智能
Elastic 中国社区官方博客6 小时前
5 分钟内将 56 页扫描文档转化为带引用的答案:面向搜索无法读取的文档的检索增强生成流水线
大数据·运维·人工智能·elasticsearch·搜索引擎·信息可视化·全文检索
STLearner6 小时前
KDD 2026 | (2月轮)时空数据(Spatial-Temporal)论文总结时空【下】(人群移动,城市科学(资源调度,)
大数据·人工智能·python·深度学习·机器学习·语言模型·数据挖掘
starzy19906 小时前
KafkaProducer 源码深度剖析:与 Broker 建立连接
大数据·kafka