大作业爬取手机数据,实现手机推荐系统以及朋友圈手机论坛

1、功能简介

(1)用户注册与用户登录

(2)手机搜索、手机比拼、手机个性化推荐

(3)点击搜索的手机图片会就用户行为 ,轮播展示用户行为,推荐点击次数靠前的手机

(4)数据可视化 ,包括公司品牌的可视化和手机的可视化统计绘图

(5)用户管理 ,头像上传和密码修改

(6)手机论坛朋友圈 ,可以发布论坛探讨手机相关的东西,用户可以发表论坛、类似朋友圈,可以进行评论互相探讨,评论的消息会在消息中心进行提示

注:需要源码s我

2、技术实现

(1)后端架构设置划分层次,架构思想跟java的分层管理类似方便代码管理,划分为如下:

视图控制层,即http请求接口的入口;

业务服务层,处理请求之后的各种业务化需求;

数据链接层Dao,与数据库交互获取到具体需要的数据,进行sql的增删改查;

实体层Entity,存放与数据库对应的数据表实体类;

数据传输交换层DTO,存放需要返回给到前段使用的实体类

工具类层,存放整个后端普遍调用使用的方法操作

(2)前后端技术:后端实现使用python,所用框架有flask进行http后端服务的构建,前端使用vue框架结合vite构建项目(构建完了之后就是基础的html+css+javascript),构建完成后使用nginx进行转发启动(发展愿景,使用nginx还可以进行后端多节点部署,进行负载均衡转发)

(3) 数据库:兼容mysql和单机版的sqlite两种数据库,可以按照需要进行配置化,如果嫌mysql安装麻烦就可以直接使用sqlite单机版的,直接一个数据文件,可以用mysql一样的数据库连接工具进行连接使用的。

(4)数据爬取:数据来源与中关村平台,在python使用apschuduler框架进行定时任务设置,结果xml的xpath解析爬取网页手机数据和品牌公司数据,可以配置化定时进行数据爬取,爬取可以按照具体需求和电脑cpu性能适当设置线程数量,进行多线程的数据爬取。注意:网络爬虫需要实时跟进,如果页面样式变化可能部分数据就爬取不到。

3、界面介紹

(1)用户登录界面和注册界面

(2)手机系统主菜单栏和主界面,进入主界面能够直接进入手机搜索功能界面

(3)手机对比功能界面

(4)手机推荐功能界面

(5)左上角轮播模板是在搜索和手机推荐查询之后点击手机图片查看具体参数,会记录用户行为,在坐上角进行轮播图片展示,点击次数越多权重就越大,就优先展示

(6)左下角是用户在手机论坛中对你的评论在此处可以看到,会实时刷新

(7)手机品牌排行版

(8)手机数据可视化,平拍综合评分、品牌价格曲线、品牌市场占有率、品牌好评率

(9)手机数据可视化,包括cpu词频云绘画、手机评分top绘画、平拍拥有的手机数量可视化

(10)用户管理界面,可以更改头像和修改密码登,注册进来后系统会随机安排一个头像

(11)手机论坛、类似朋友圈一样的功能,可以发布自己想要发布的论坛内容进行手机的探讨,跟别人在评论区讨论,可以删除自己的文章和评论,查看文章等

相关推荐
hui函数14 小时前
Flask-WTF表单验证全攻略
后端·python·flask·web·表单验证
清风66666617 小时前
基于51单片机自动浇花1602液晶显示设计
单片机·嵌入式硬件·mongodb·毕业设计·51单片机·课程设计
秋名山码民19 小时前
基于YOLO11的手机违规使用检测模型训练实战
智能手机
咖啡里的茶i19 小时前
数字化图书管理系统设计实践(java)
java·课程设计
liupengfei-iot21 小时前
AutoGLM2.0背后的云手机和虚拟机分析(非使用案例)
人工智能·智能手机·ai编程
OEC小胖胖2 天前
【React Hooks】封装的艺术:如何编写高质量的 React 自-定义 Hooks
前端·react.js·前端框架·web
练习时长两年半的Java练习生(升级中)2 天前
从0开始学习Java+AI知识点总结-18.web基础知识(Java操作数据库)
java·学习·web
BYSJMG2 天前
计算机大数据毕业设计推荐:基于Spark的气候疾病传播可视化分析系统【Hadoop、python、spark】
大数据·hadoop·python·信息可视化·spark·django·课程设计
计算机毕设残哥2 天前
大数据毕业设计选题推荐:护肤品店铺运营数据可视化分析系统详解
大数据·信息可视化·课程设计
编程乐学2 天前
原创模板--基于 Android 开发的驾考训练App
android·android studio·大作业·移动端开发·安卓移动开发·驾考宝典·驾考app