大作业爬取手机数据,实现手机推荐系统以及朋友圈手机论坛

1、功能简介

(1)用户注册与用户登录

(2)手机搜索、手机比拼、手机个性化推荐

(3)点击搜索的手机图片会就用户行为 ,轮播展示用户行为,推荐点击次数靠前的手机

(4)数据可视化 ,包括公司品牌的可视化和手机的可视化统计绘图

(5)用户管理 ,头像上传和密码修改

(6)手机论坛朋友圈 ,可以发布论坛探讨手机相关的东西,用户可以发表论坛、类似朋友圈,可以进行评论互相探讨,评论的消息会在消息中心进行提示

注:需要源码s我

2、技术实现

(1)后端架构设置划分层次,架构思想跟java的分层管理类似方便代码管理,划分为如下:

视图控制层,即http请求接口的入口;

业务服务层,处理请求之后的各种业务化需求;

数据链接层Dao,与数据库交互获取到具体需要的数据,进行sql的增删改查;

实体层Entity,存放与数据库对应的数据表实体类;

数据传输交换层DTO,存放需要返回给到前段使用的实体类

工具类层,存放整个后端普遍调用使用的方法操作

(2)前后端技术:后端实现使用python,所用框架有flask进行http后端服务的构建,前端使用vue框架结合vite构建项目(构建完了之后就是基础的html+css+javascript),构建完成后使用nginx进行转发启动(发展愿景,使用nginx还可以进行后端多节点部署,进行负载均衡转发)

(3) 数据库:兼容mysql和单机版的sqlite两种数据库,可以按照需要进行配置化,如果嫌mysql安装麻烦就可以直接使用sqlite单机版的,直接一个数据文件,可以用mysql一样的数据库连接工具进行连接使用的。

(4)数据爬取:数据来源与中关村平台,在python使用apschuduler框架进行定时任务设置,结果xml的xpath解析爬取网页手机数据和品牌公司数据,可以配置化定时进行数据爬取,爬取可以按照具体需求和电脑cpu性能适当设置线程数量,进行多线程的数据爬取。注意:网络爬虫需要实时跟进,如果页面样式变化可能部分数据就爬取不到。

3、界面介紹

(1)用户登录界面和注册界面

(2)手机系统主菜单栏和主界面,进入主界面能够直接进入手机搜索功能界面

(3)手机对比功能界面

(4)手机推荐功能界面

(5)左上角轮播模板是在搜索和手机推荐查询之后点击手机图片查看具体参数,会记录用户行为,在坐上角进行轮播图片展示,点击次数越多权重就越大,就优先展示

(6)左下角是用户在手机论坛中对你的评论在此处可以看到,会实时刷新

(7)手机品牌排行版

(8)手机数据可视化,平拍综合评分、品牌价格曲线、品牌市场占有率、品牌好评率

(9)手机数据可视化,包括cpu词频云绘画、手机评分top绘画、平拍拥有的手机数量可视化

(10)用户管理界面,可以更改头像和修改密码登,注册进来后系统会随机安排一个头像

(11)手机论坛、类似朋友圈一样的功能,可以发布自己想要发布的论坛内容进行手机的探讨,跟别人在评论区讨论,可以删除自己的文章和评论,查看文章等

相关推荐
点灯小铭28 分钟前
基于单片机的夹具压力控制系统设计
单片机·嵌入式硬件·mongodb·毕业设计·课程设计
计算机毕业设计木哥10 小时前
计算机毕设选题推荐:基于Hadoop和Python的游戏销售大数据可视化分析系统
大数据·开发语言·hadoop·python·信息可视化·spark·课程设计
老花眼猫16 小时前
可自动求解的魔法游戏程序(C语言)
c语言·经验分享·青少年编程·课程设计
被巨款砸中21 小时前
Jessibuca 播放器
前端·javascript·vue.js·web
Digitally1 天前
从iPhone转移到itel手机的联系人转移指南
ios·智能手机·iphone
清风6666661 天前
基于单片机的智能点滴输液速度与液位控制系统设计
单片机·嵌入式硬件·毕业设计·课程设计
vxtkjzxt8881 天前
手机群控软件如何优化游戏运营的运营策略
游戏·智能手机
点灯小铭1 天前
基于单片机的智能水瓶温度控制系统
单片机·嵌入式硬件·毕业设计·课程设计
点灯小铭1 天前
基于单片机的四点位水位控制与报警系统设计
单片机·嵌入式硬件·毕业设计·课程设计
计算机毕业设计小帅1 天前
【2026计算机毕业设计】基于微信小程序的英语在线学习系统
学习·微信小程序·毕业设计·课程设计