使用Python作为编程语言,配合MySQL数据库以及Hadoop和Spark等大数据处理工具,实现了数据的抓取、清洗、分析到可视化展示的整个流程。系统采用Scrapy爬虫框架从拉勾网招聘平台高效抓取计算机行业的就业数据。随后,通过Pandas库对数据进行了深入处理和分析。前端界面使用Vue框架和ECharts库构建,不仅实现了数据的动态可视化展示,如展现职位数量和薪资水平等关键信息,还提供了基于关键词的职位搜索功能,使用户能够获得个性化的就业建议和市场趋势分析。

系统架构原理图:

使用的软件是:Pycharm+WebStorm+DataGrip
系统主界面图

系统注册和登录界面:
职位推荐界面

数据管理界面

城市岗位数量地图

城市岗位数量地图:

岗位标签词云统计图表

有源码,需要的私信。