基于Hadoop的微博社交媒体用户大数据分析【海量数据】

文章目录

• • ==有需要本项目的代码或文档以及全部资源，或者部署调试可以私信博主==
  • • 项目介绍
    • 数据集展示
    • Hadoop脚本文件
    • 可视化展示
    • 每文一语

有需要本项目的代码或文档以及全部资源，或者部署调试可以私信博主

项目介绍

本项目基于hadoop的社交媒体用户进行大数据分析，数据来源于微博用户信息，共计二十余万条，通过数据预处理之后，再将结构化数据上传到hadoop进行大数据分析，通过MapReduce执行系列分析语句，完成数据分析并通过sqoop将结果指标导出到MySQL，在利用Pyecharts进行连接数据源进行编程可视化，最终将可视化渲染为web界面，完成分析。

过程细节涉及过多，有大量的细致语法实现，需要仔细的推敲。

数据集展示

Hadoop脚本文件

可视化展示

每文一语

成长在于不断地进步