基于Python的微博大数据舆情分析,舆论情感分析可视化系统,可作为Python毕业设计

运行效果图

基于Python的微博大数据舆情分析,舆论情感分析可视化系统

系统介绍

微博舆情分析系统,项目后端分爬虫模块、数据分析模块、数据存储模块、业务逻辑模块组成。

先后进行了数据获取和筛选存储,对存储后的数据库数据进行提取分析处理等操作,得到符合需要的结构化数据,将处理后的数据根据需要进行分析,得到相关的可视化数据,然后提供对应的接口给前端页面,显示在项目的前端页面中。

使用flask进行整个项目框架的构建,爬虫部分模块使用requests官方依赖库进行数据获取,根据微博公开的api接口获取结构化json数据,然后使用pandas对数据进行筛选,处理和分析。

部分效果图

功能图示

  • 功能页面路径图

从前端页面的角度,对系统的功能路径做一个概览,主要的功能路径可以直接在图里看到,图中不同的颜色块代表不同的模块功能和页面,规范的软件uml有条件再上。

使用技术概览

  • python3,flask框架,hanlp做文字符号处理,numpy、pandas做数据分析处理,sqlite,mysql数据库,SQLAlchemy用作ORM框架,snownlp自然语言情绪值分析

  • vue3,vue-template开发

后端代码文件结构记录

使用的主要依赖包

  • beautifulsoup4
  • requests
  • Flask
  • hanlp
  • pandas
  • numpy
  • PyMySQL
  • SQLAlchemy
  • snownlp
  • jieba
  • xlrd 操作文件相关的库不在使用

文件结构 /weibo_sentiment

  • 数据分析计算模块 /analysis
  • 数据库配置模块 /database
  • 爬虫模块 /scrapy
  • ORM的model模块 /model
  • 前后端交互控制器 app app.py
  • 静态资源 /static
  • 使用帮助 help.md
  • 项目依赖 requirements.txt

前端代码文件结构记录

  • 使用的技术

vue全家桶之部分vue技术,在vue-template的基础上进行的开发,不必重复造轮子,可以节省大量的开发时间,提高开发效率。

vue主要应用的技术:

  • axios
  • echarts
  • element-ui
  • vue
  • vue-router

前端部分重要文件结构

  • /node_modules 依赖文件管理库
  • /public 公共静态资源存放文件夹
  • /src 核心文件
  • /api 前端的api接口请求方法
  • /components 页面复用组件
  • /router 页面路由面板
  • /styles 页面引用的样式库
  • /utils 工具库
  • /views 视图页面
  • /static 静态资源文件
  • /tests 测试模块文件
  • package.json vue项目的配置文件
  • vue.config.js vue项目代理、路由等配置文件

源码下载

伸手党勿扰

相关推荐
千天夜2 分钟前
使用UDP协议传输视频流!(分片、缓存)
python·网络协议·udp·视频流
测试界的酸菜鱼5 分钟前
Python 大数据展示屏实例
大数据·开发语言·python
羊小猪~~9 分钟前
神经网络基础--什么是正向传播??什么是方向传播??
人工智能·pytorch·python·深度学习·神经网络·算法·机器学习
晨曦_子画15 分钟前
编程语言之战:AI 之后的 Kotlin 与 Java
android·java·开发语言·人工智能·kotlin
Black_Friend23 分钟前
关于在VS中使用Qt不同版本报错的问题
开发语言·qt
放飞自我的Coder39 分钟前
【python ROUGE BLEU jiaba.cut NLP常用的指标计算】
python·自然语言处理·bleu·rouge·jieba分词
希言JY1 小时前
C字符串 | 字符串处理函数 | 使用 | 原理 | 实现
c语言·开发语言
残月只会敲键盘1 小时前
php代码审计--常见函数整理
开发语言·php
xianwu5431 小时前
反向代理模块
linux·开发语言·网络·git
ktkiko111 小时前
Java中的远程方法调用——RPC详解
java·开发语言·rpc